15毫秒换脸术，虚拟小姐姐的诞生！

大家好，我是时小说。

日前，一年一度的全球游戏开发者大会GDC 2018顺利落下帷幕。PC、主机以及各式各样的硬件和游戏平台运营商都带来了他们最前沿的产品资讯。

期间，Unreal在其技术演示中展示了一个数字人类角色——Siren，这个基于计算机视觉等技术构建的虚拟小姐姐，让业内媒体及专业人士都直呼“炸裂”。因为——

太逼真了！

她拥有逼真的眼睛、皮肤和头发，讲起话来表情丰富，一颦一笑几乎与真人无异，效果可以说达到了前所未有的程度。

这位“Siren”并非真人，而是完全在虚幻引擎中实时呈现的虚拟人类。

怎么做到的？请看GDC现场的演示：

难免让人感叹：电脑合成的数字人类角色，已经到这个程度了！

大屏幕上的数字人类Siren，她的每一个动作、表情、发音，都来自于现场一位真实女性的“表演”，而这个过程是同步的。

这也就解释了，为什么“siren”长着标致的东方面孔，开口却是一口地道的伦敦腔。这场的完美呈现，背后其实是一套强大的人类表情实时捕捉及合成技术。

担当“ Siren ”外形和脸模的，是中国上戏出身的女演员姜冰洁。现场说话并做做动态捕捉的，是英国演员阿莱克莎·李（Alexa Lee）。

Alexa Lee的表情和声音，在被头戴设备捕捉之后，与姜冰洁的外貌进行合成，最后就成了Siren。

这个“换脸”过程，在15毫秒内完成。

效果很惊艳。但早在去年的时候，Epic Games 连同 Ninja Theory 展示的游戏《地狱之刃：塞娜的献祭》，就采用了这种实时动态捕捉技术。

所以说，“Siren”并非最新出现的技术，而是这项技术的升级版。

除了上面提到的 Epic Games，提供了最基础和重要的虚幻4引擎，参与这个项目的还包括拥有最先进面部扫描技术的 3Lateral ，提供了实时面部解算；有最先进的表情重建系统的 Cubic Motion ；拥有最先进的实时数据传输系统 Vicon ，提供人体动作捕捉系统；以及腾讯旗下游戏工作室 Next Studio 等。

聚合了多方实力团队的技术支撑，才造就了“Siren”的诞生。

△ Siren 官方推介视频

这个项目意在虚拟环境中构建一个真实世界。但Epic Games也特别强调，在GDC 2018大会上，他们最想测试Cubic Motion脸部捕捉系统的潜力。

Cubic Motion 的计算机视觉技术，能以每秒90帧的速度跟踪200多种面部特征，并将这些数据实时映射到高分辨率的数字角色身上。Alexa Lee 戴的头盔，就是来自 Cubic Motion。

Epic Games 首席技术官直言，Cubic Motion 突破性的计算机视觉和面部动画技术是项目最终取得成功的关键之一。

实际上，Siren项目始于Epic Games和腾讯之间的合作，目的是通过一个概念验证演示，以展示虚幻引擎4的实力，以及下一代数字角色长什么样。

也就是，目前Siren上的相关技术，未来可能会应用到腾讯的游戏中。

是不是瞬间产生了“科技离我很近”的感觉？

同样，这项技术还可以帮助电影、动画、游戏等行业降低生产成本，提高虚拟人物的亲和力，应用领域将非常广泛。

对于电脑合成的数字人类

你有什么想法？

欢迎留言和我们分享

如果本文让你开了脑洞，欢迎推荐给你的好友。

·E N D·