可以改变视频产业的突破性AI技术,合成编辑视频中的人像

AiTechYun

编辑:chux

研究人员最近开发了一个基于深度学习的系统,首次可将原演员的完整3D头部位置,面部表情和目光转移到目标演员。

“合成和编辑视频中的人像,即用来展示人的头部和上身的视频,是计算机图形学中的一个重要问题,应用于视频编辑和电影后期制作,视觉效果,视觉配音,虚拟现实和远程呈现等等,”研究人员在他们的研究报告中解释说。

团队使用NVIDIA TITAN Xp GPU,用公用的剪辑训练了生成神经网络十个小时。

因视频无法通过审核,请访问原文查看视频。

“我们的方法使原演员能够完全控制目标演员的僵硬的头部姿态,面部表情和眼球运动; 甚至面部识别也可以在一定程度上进行修改,”该团队解释说。“所有这些维度都可以共同或独立操纵。并且自动合成完整的目标框架,包括整个头部和头发,以及符合修改过的头部的逼真的上半身和背景。”

这项工作是基于之前在GPU技术会议上展示的Face2Face工作。该系统可能会被用于诸如面部再现、外语电影的视觉配音和电影后期制作等领域。

研究人员说,与其他方法相比,他们目前的方法表现很好。“我们通过实验和用户研究表明,我们的方法质量胜过以前的工作,并扩展了其可能性。因此,它在许多应用程序中开辟了新的功能级别,如用于虚拟现实和远程呈现的视频重现,交互式视频编辑和视觉配音。”

这项工作研究人员来自马克斯普朗克信息学研究所,Technicolor,慕尼黑理工大学,巴斯大学和斯坦福大学等。

原文发布于微信公众号 - ATYUN订阅号(atyun_com)

原文发表时间:2018-06-04

本文参与腾讯云自媒体分享计划,欢迎正在阅读的你也加入,一起分享。

发表于

我来说两句

0 条评论
登录 后参与评论

相关文章

来自专栏机器人网

懒人有福:Maryland大学欲开发能跟视频学做饭的机器人

懒得做饭的上班族和暗黑料理的大宗师们,还在为做饭发愁吗?Maryland大学正在研发的一款机器人,在看完YouTube上的烹饪视频后,就能把饭菜做出来。 如果...

2784
来自专栏量子位

又大又沉!老黄发布英伟达GPU服务器标准平台HGX-2

1622
来自专栏王玉伟的专栏

深入理解 CPU 和异构计算芯片 GPU/F10PGA/ASIC

深度学习在线预测、直播中的视频转码、图片压缩解压缩以 HTTPS 加密等各类应用对计算的需求已远远超出了传统 CPU 处理器的能力所及...

3.8K3
来自专栏杨熹的专栏

一天读一本书的秘密

两本书里都给出了可以快速阅读的方法和步骤。他们有一些重合的地方,也各自有一些独特的观点。

1123
来自专栏顶级程序员

王咏刚:为什么 AI 工程师都要懂些架构?

作者简介 王咏刚 Google软件工程师 著名技术撰稿人和IT演说家 创新工场AI工程院副院长 AI 时代,我们总说做科研的 AI 科学家、研究员、算法工程师...

3476
来自专栏大数据文摘

谷歌AK47制造者:阿米特.辛格博士

1985
来自专栏BestSDK

Google上线云端语音识别API,支持80多种语言可转换中文文字

Google日前正式发布旗下云端语音识别API,支持80多种语言,也能辨识正体中文。而新版API加强了长版音频档的转录精准度,也新增支持WAV、Opus和Spe...

7384
来自专栏机器之心

前沿 | MIT脑控机器人再升级:脑信号+肌肉信号,轻松控制机器人动作

让机器人做事并不容易:通常,科学家要么对机器人进行明确编程,要么使机器人理解人类如何通过语言进行沟通。

1282
来自专栏镁客网

这款DNA机器人,可以帮你分拣身体中的生物垃圾 | 黑科技

1840
来自专栏新智元

深度学习颠覆云计算,亚马逊、微软、谷歌势必与英伟达一决高下

【新智元导读】多位精英CIO、CTO和技术高管组成的福布斯杂志的常设部门Forbes Technology Council 撰文指出,随着市场对针对机器学习优化...

3599

扫码关注云+社区

领取腾讯云代金券