实时编辑视频人物的动作表情，AI要让电影明星下岗了……

深度视频肖像Deep Video Portraits

SIGGRAPH(Special Interest Group for Computer GRAPHICS,计算机图形图像特别兴趣小组)成立于1967年,一直致力于推广和发展计算机绘图和动画制作的软硬件技术。

在最近的2018SIGGRAPH大会上，来自斯坦福大学计算机图形实验室(Computer Graphics Laboratory)和德国普朗克信息研究所(Max Planck Institute for Informatics)的学者们发布了一项名为深度视频肖像（Deep Video Portraits）的研究。

文章提出了一种新颖的视频编辑方法，可以仅使用输入视频对逼真的肖像视频进行重新编辑。

与仅限于面部表情操作的现有方法相比，这项研究第一个提出了全3D头部位置、头部旋转、脸部表情、眼睛注视和眨眼转移到目标肖像视频的编辑方法，方法核心使用全新的时空结构训练神经网络。

该网络将参数人脸模型的合成渲染作为输入，基于该模型预测给定目标演员肖像逼真的视频帧。这种渲染到视频传输的真实性通过严格的对抗训练来实现的，因此可以创建修改后的目标视频，模仿合成创建输入的行为。

凭借自由组合源和目标参数的能力，方法能够演示各种各样的视频重写应用程序，而无需明确建模头发，身体或背景。例如，可以使用交互式用户控制重新编辑完整的头部，并实现高保真视觉配音。

为了证明方法的输出质量高，研究进行了一系列广泛的实验和评估，研究表明用户很难检测到这项视频被编辑过。

以后视频也不能当证据了~

dvdf

本期编辑|张紫月