大开眼界:Facebook做了一个会“开眼”的AI,拯救眨眼照片

郭一璞 发自 雨中的海淀 量子位 报道 | 公众号 QbitAI

端午的三天假期,你们是不是都穿得帅帅美美的出去浪了?

既然出门了,一定要拍照发朋友圈(尤其是拍女朋友,要修图,划重点)。

想象一下,当你带着貌若天仙的女友在海边,她穿着飘逸的波西米亚大摆长裙,海风吹着裙子飞舞,蓦然回首的一刻,露出新垣结衣般的笑容。

等下一个天亮,把偷拍我看海的照片送我好吗

你抓拍下了这一刻,然后发现:哎呀,眨眼了

可是,那一刻的姿势和美感再也无法复刻。

这下瞎了,等着回去打开PS把眼睛放上去吧。拍照5秒钟,P图两小时。

毕竟,P一双眼睛上去,这是多么不自然的一件事情。虽然Adobe也提供了算法来帮你P眼睛,但是似乎还不如手动抠图来的真实。

Facebook的开眼AI

所以,Facebook帮你做了一个开眼AI,专治眨眼照片

首先,找到一个GAN,由GAN来负责找一双眼睛,抠图抠出来放到你女朋友闭眼的照片上。系统中的一部分需要找到人脸,以及识别面部表情;另一部分根据表情的反馈,重复创建有眼睛的图像。

但是,此时生成的照片过于不自然了。

于是,Facebook的研究人员灵机一动:我们的用户不是会在Facebook上发很多自己的照片吗?拿没P过的睁眼照片来当例子试试。

现在,看过“标准答案”的AI越发聪明了,它已经可以生成一些毫无PS痕迹的照片。

第一列是“标准答案”,日常睁眼照片; 第二列是眨眼图原图; 第三列是Adobe算法抠图贴上去的效果; 第四列是学习了标准答案之后GAN的作品。

效果惊人,第四列中没有出现颜色不匹配的情况,也没有不自然的过渡痕迹,就好像照片中的人物睁眼了一样。

这个AI在测试中效果拔群。超过一半的测试中,人类测试员搞错了照片的真假。

效果好是有前提的

一个照片的开眼效果,既要考虑AI奋斗,也要考虑数据的质量。

比如说,如果刘海挡住了眼睛,或者飞扬的头发遮住了眼睛的一部分:

那对不住,总会产生一些阴影之类的效果,影响“开眼”质量。

另外,还需要你的其他睁着眼睛的照片,Facebook做这件事就有一个天生的好处:很多用户都会在Facebook上传一些自己的照片,这些照片一方面可以拿来给AI做范例,另一方面还可以与贴完眼睛的照片对比,检验生成的质量和效果。

他们的这项研究,就叫做ExGANs。别想歪了,不是用了这个GAN就变Ex,这里的Ex是Exemplar,范例的意思。

从此以后,闭着眼睛也能自拍发Facebook了。

哦对了,这个社交网站并不存在,不是么?

最后,附论文传送门~ Eye In-Painting with Exemplar Generative Adversarial Networks 作者:Brian Dolhansky, Cristian Canton Ferrer 发表于CVPR 2018 arXiv:https://arxiv.org/abs/1712.03999 代码:https://github.com/bdol/exemplar_gans

原文发布于微信公众号 - 量子位(QbitAI)

原文发表时间:2018-06-17

本文参与腾讯云自媒体分享计划,欢迎正在阅读的你也加入,一起分享。

发表于

我来说两句

0 条评论
登录 后参与评论

相关文章

来自专栏吉浦迅科技

绝不肤浅:GPU 用法眼详实地追踪皱纹和其它生物标记

美丽或许是肤浅的,但市值数十亿美元的医美产业绝不会因此而停下脚步。 如今研究人员运用深度学习技术来解决皱纹、老人斑及其它在肌肤上显露健康状态的生物标记各种肌肤问...

34050
来自专栏AI科技评论

观点 | 从CVPR'18谈谈华人研究者的Leadership

AI 科技评论按:本文作者周博磊,首发于作者的知乎主页,AI 科技评论获其授权转载。

13620
来自专栏镁客网

美物理学家颠覆现有全息技术,使走进3D电影的世界成为可能 | 黑科技

13030
来自专栏量子位

AI能有多污?要看你喂它吃什么 | 怎样玩坏GAN

Robbie Barrat虽然刚刚高中毕业,但驾龄已经不短了。他日常给AI投喂各种各样的画作,然后让AI自己画。

9610
来自专栏镁客网

拔刺 | 如何通过人工神经网络实现图像识别?

人工神经网络作为一个新技术正不断融入各个学科,其独有的优势在数字图像处理中也得到了不错的运用。针对卷积神经网络做图像识别,则是一个相当火的方向,如腾讯云识别,只...

15840
来自专栏CDA数据分析师

【十二星座(下)】大数据和机器学习揭示人类的天赋究竟从何而来?

? 作者 wwqqer 本文首发经管之家论坛,转载需授权 原文链接:http://bbs.pinggu.org/thread-5953190-1-1....

24160
来自专栏吉浦迅科技

猫脸辨识没这么容易!GPU加持深度学习才突破瓶颈

本篇献给奋战在深度学习领域里的铲屎官们! 奇群科技执行长宋牧奇一直想为旗下团队熟悉的先进GPU技术研发实力,找到一个杀手级的应用,经过多次碰壁后,没想到最后却是...

500140
来自专栏镁客网

性能达“怪兽”级别的激光器,以超高发射频率拍摄达原子分辨率照片 | 黑科技

15600
来自专栏AI研习社

LIDAR : 自动驾驶汽车的关键传感器

在 Voyage 上我们分享了关于 Homer 的新消息,即第一个自动驾驶出租车。Homer 配备了一系列的传感器,来理解世界并进行导航,其中的关键设备是 LI...

18060
来自专栏DT数据侠

这个2017最佳数据可视化案例,竟是个音乐剧freestyle

《汉密尔顿》这部红极一时、创造票房奇迹的音乐剧,不仅让奥巴马全家观看了两次,也影响了整个美国百老汇。今年‍‍的“GEN数据新闻奖”中的年度数据可视化奖,就被来自...

15800

扫码关注云+社区

领取腾讯云代金券