由2D图像重建3D场景,AR应用Volume可让电影角色现身你的客厅

想跟《低俗小说》中的约翰·特拉沃尔塔、乌玛·瑟曼一起跳舞吗?AR应用Volume有一天会帮你实现这一梦想。

Volume是由Or Fleisher和Shirin Anlen所做的一种新的体验,它能识别电影中的2D图像,并将它们投射到3D空间中。例如《低俗小说》,它可以切断角色周围的场景,让他们在用户的客厅里跳舞。

目前,该应用处于早期阶段,效果还不是很理想,但前景是可期待和令人兴奋的。

“我们的《低俗小说》实验让用户可以在现实中使用苹果的ARKit框架,进入增强现实中的电影场景。” Fleisher解释说,“这个实验是我们目前正在进行的为数不多的实验之一,它展示了从2D图像中重建3D场景的力量。能够将档案和静态影像重建到3D环境的可能性是开发这些体验的主要动机之一。”

该系统使用机器学习从单个图像的深度来预测结果,并使用卷积神经网络来对图像进行深度对应值的过滤。

目前,Volume正在开发为端到端的web应用,此后将支持AR和VR平台。“我们的整个机器学习基础设施都是基于谷歌的人工智能工具Tensorflow。” Fleisher说,“……我们的方法更受电影和视觉叙事的启发,而不是重建三维世界的数学逻辑。我们认为这种方法对这个工具更有益,并带来一种新的创造性的方式来理解该领域的挑战。”

  • 发表于:
  • 原文链接:http://kuaibao.qq.com/s/20180127A05ENT00?refer=cp_1026
  • 腾讯「云+社区」是腾讯内容开放平台帐号(企鹅号)传播渠道之一,根据《腾讯内容开放平台服务协议》转载发布内容。

扫码关注云+社区

领取腾讯云代金券