Meta Reality Labs研究项目展示新AR交互功能

Meta Reality Labs 的研究人员早前展示了一种通过 AR 与现实世界交互的方法。其中，通过利用微软 HoloLens 可以营造一种“虚拟动作影响物理场景的视觉错觉”。

据悉，Reality Labs 和杜伊斯堡-埃森大学的研究人员设计了一种将真实对象虚拟化的方法，以便可以与它们进行实时交互。这一研究不仅能将现实世界中的真实对象数字化，而且还能在生成虚拟对象后无缝擦除与之对应的真实对象。

具体来说，团队提出了 Scene Responsiveness 场景响应的概念和系统，即虚拟动作影响物理场景的视觉错觉。使用协同对齐的数字孪生来保持环境中物理对象的一致性，Scene Responsiveness 允许用户操纵看似虚拟对象的物理对象。

Reality Labs 研究人员将这一概念称为“场景响应性”，并于去年年底在 ACM 用户界面软件和技术研讨会上发表了他们的研究成果。但从视频来看，这一研究目前展示的内容在视觉上并不完美，很大程度上是一种概念验证，依赖于大量手动的、特定场景的工作才能实现。

是什么让这个概念如此有趣呢？我们都看过 AR 演示体验，虚拟对象似乎漂浮在你的房间里，附着在你的墙上，甚至躲在物体的“后面”。我们甚至看到虚拟对象似乎能够遵循房间的物理规律，在桌上滚动，然后在到达桌子边缘时正确地掉落。

但是，将空间中的真实物体数字化，让用户对它们进行虚拟控制，同时将真实物体从原来的位置抹去，这是一个非常有趣的技巧。也许更强大的是当场景中的虚拟人物与现实世界中的物体直接交互。

当然，研究中展示的演示内容尚不完美，很大程度上是一个概念证明，依赖于大量特定场景。但是随着计算机视觉和人工智能的快速发展，我们不难想象这样一个系统如何能够以一种自动的、独立于场景的方式建立起来，并且非常令人信服。