苹果新的 ARKit开发者平台神奇之处就在于,在iPhone上创造精彩的AR体验只需要摄像头就够了,而不用其他额外的硬件。
Clay也想在不使用额外硬件的情况下,让iPhone实现手势跟踪。开发者可能对Clay比较熟悉了,这是一套SDK套件,能够让智能手机上的应用只借助手机上的摄像头就能跟踪用户的3D手势。它能够识别超过30种手势,使得用户可以不用控制器就能操作和使用。Clay曾展示过如何用这套SDK与电脑交互,以及如何控制基于智能手机的VR体验。
就在苹果发布ARKit之后,Clay团队就开始研发在ARKit实现上述功能(也就是无需外设的手势跟踪)。该公司表示,在接下来一两周就能够准备就绪。
从理论上来讲,这意味着,iOS 11正式发布后,ARKit就能拥有更加简单方便的控制方案了。目前,微软的HoloLens用的类似的解决方案,也就是用户通过手指的捏合进行交互。不同之处在于,iPhone不是AR头显(至少还现在不是),因此你需要一只手拿着手机,另一只手进行手势控制。这套 SDK 已经可以通过 Unity 引擎进行调用,不久之后还计划支持三星的Galaxy系列手机。