创建脸部3D模型,谷歌让你在虚拟世界里也能明眸善睐!

像Owlchemy实验室和LIV这样的创业公司正尝试简化图像捕获的过程,并获取更高质量的图像,但现有的图像捕捉方法都受到一个障碍的限制。人体最富有表现力的一部分,人们的脸,往往无法被捕捉成功。在与虚拟世界进行交互时,用户需要时刻想象他人的表情。

然而,谷歌已经展示了一些令人印象深刻的研究,这些研究或将使图像捕捉技术更上一层楼。利用包括改良的HTC Vive和SMI眼动追踪的一系列技术,谷歌将把你的脸重新数字化,用它替代你的脸被头显所遮住的部分。

这项成果是由Research、Daydream实验室和the YouTube团队共同的达成的。在一篇深入研究该技术的博客文章中,解释了它是如何工作的:

这个技术背后的核心理念,是使用用户脸部的3D模型来替代被头显遮住的脸,从而创建一个“摘掉头显”的假象。

首先,其将为用户创建个性化的3D脸部模型,这种3D脸部模型被称为注视点动态外表。其次,初始的校准步骤需要用户坐在彩色深度相机和显示器前方,然后让用户用双眼追踪显示器上的标记。

我们通过使用这个一次性校准程序(通常需要不到一分钟),来获得用户的3D人脸模型,并得到一个数据库。该“注视点”数据库将包括面部图像、不同眼睛注视方向和眨眼等数据。该数据库将动态地合成用户的脸部,并生成所需的注视点,从而使合成后的脸部看起来自然生动。

该项目的成员,包括研究员Vivek Kwatra和软件工程师Christian Frueh、Avneesh Sud等都相信该项目未来将能够“加强VR中用于沟通和社会互动的多样化应用,比如VR视频会议、多人VR游戏等”。

本文由uploadvr刊发,属VRPinea原创编译文稿,转载请洽:brand@vrpinea.com

原文发布于微信公众号 - VRPinea(VRPinea)

原文发表时间:2017-03-07

本文参与腾讯云自媒体分享计划,欢迎正在阅读的你也加入,一起分享。

发表于

我来说两句

0 条评论
登录 后参与评论

相关文章

来自专栏数据科学与人工智能

【数据挖掘】这些年,这些挖掘机算法,这些反思

写这篇文章,缘自于前几天部门内部成员们进行了一次部门内部现有涉及的一些算法的review以及整理。不过比较囧的就是,由于boss不在,我们讨论讨论着就成了吐槽大...

2629
来自专栏大数据文摘

机器真的已经战胜人类医生了吗?医学AI标题党文章中的三大陷阱

2007
来自专栏大数据文摘

立下新年flag之前 先看看如何用数据督促自己完成年度计划

1727
来自专栏镁客网

黑科技 | 用温度控制脑部活动,磁热刺激技术可用于治疗精神疾病

1390
来自专栏新智元

【神经拟态计算】 有新灵魂的机器——模拟大脑的计算机

人们喜欢变着花样来形容大脑。以前,大脑被时髦地比作 17 世纪贵族花园中赏心悦目的喷泉背后的水力供应系统。随着技术的发展,大脑先后被形容为电报通信网和电话交换系...

3496
来自专栏机器人网

机器人三角轮系的机构图

三角轮系   图2.63所示为三角轮系的机构图。这是日本东京大学研制的一种机器人轮系, 它所装备的机器人用于核电厂的自动检测和维修。该机器人除了采用三角轮系外,...

2814
来自专栏大数据挖掘DT机器学习

数据挖掘这些年,这些算法,这些反思

写这篇文章,缘自于前几天部门内部成员们进行了一次部门内部现有涉及的一些算法的review以及整理。不过比较囧的就是,由于boss不在,我们讨论讨论着就...

3066
来自专栏新智元

神经模拟重大突破,新算法拥有全脑超级计算机模拟能力

【新智元导读】Jülich研究中心等的研究人员在模拟人类大脑神经连接方面取得重大突破,他们使用NEST开源神经模拟工具,拥有在超级计算机上模拟人类大脑的1000...

52420
来自专栏ATYUN订阅号

MIT研究:AI模型从患者数据中学习,减少癌症治疗过程中的毒性

麻省理工学院的研究人员正在采用新的机器学习技术,通过减少对神经胶质母细胞瘤的毒性化疗和放射治疗,提高患者的生活质量。胶质母细胞瘤是一种脑癌最具侵袭性的形式。

591
来自专栏AI科技评论

视频 | 演员要失业了?AI 实时模拟面部表情,传神效果堪比真人克隆

这里是,雷锋字幕组编译的 Two minutes paper 专栏,每周带大家用碎片时间阅览前沿技术,了解 AI 领域的最新研究成果。

1346

扫码关注云+社区