首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往

刷脸新时代

解放双手的小游戏

华盛顿大学计算机专业的研究生 Nathan Gitter 制作了一款叫做 Rainbrow 的小游戏,虽然这款游戏只能在IOS系统玩,但这依旧无法抵挡它的热潮。

游戏本身并没有多新颖,就是控制一个小表情上下移动吃掉小星星,同时还要躲避出现的障碍物,但它火就火在操作方法。

我眉毛旁边的肌肉抽筋了,让我缓缓

。。。

。。

对,你没看错,就是需要你灵活的眉毛,让它上下移动并以此控制表情。这款游戏是一种没有结局的游戏(就像《神庙逃亡》),但它成功地解放了双手,让人用更为有趣的方式娱乐。当然这个游戏玩好了,搞不好会把眉毛锻炼得异常灵活,说不准就会跳眉毛舞了。

人脸技术

大家还记得人脸解锁吧,这项技术和刚刚介绍的小游戏都是建立在苹果的 ARKit 框架之上的,通过使用 iPhone X 的 True Depth 相机系统,你的面部被实时捕捉,并在手机上对应出相应表情,这一功能依赖于 iPhone X 强大的相机系统和神经网络运算能力。iPhone X 的「刘海」包含了相机、麦克风、扬声器、环境光感应器、距离感应器、泛光感应元件、红外镜头和点阵投影仪等多个元件,它们组合在一起打造出 iPhone X 独一无二的体验。其中,泛光感应元件、红外镜头以及点阵投影仪构成了 True Depth 相机系统核心。

通过朝人面部发射超过 30000 个肉眼不可见光点,True Depth 相机系统不但可以扫描出用户面部精细的三维图像,并且可以结合A11仿生芯片强大的神经网络运算能力,学习追踪到人面部的各种变化,这是 iPhone X 开发出全新交互的硬件基础。

当True Depth 相机系统配合 上A11 仿生芯片的神经网络运算能力时,面部信息会被捕捉并迅速建模,并实时绘制出 50 多种面部肌肉的运动。因为这一特性,上文提到的 Rainrow 才得以开发,毕竟像眉毛的上挑和下弯这类动作都是比较简单的(前提是你在游戏时允许系统使用前置摄像头)。

作为 Rainbrow 的开发者,同时也是 iOS 开发工程师,Gitter 本人对面部交互应用非常看好,他认为人的面部表情如此丰富,配合手机能够发挥出更多作用。在 Rainbrow 之外,他还开发出另一个用鼻子控制并摧毁目标的游戏 Nose Zone,在他看来,这些技术和艺术的结合能创造出伟大的产品。而考虑到智能手机出现这么多年,触摸交互的影响深入人心,我们似乎可以预见另一个由人脸交互带来的新变革。

技术的变革

在拥有手机之前人们多倾向于面对面交流,面部表情就显得十分重要。随着科技的发展人们躲在屏幕后面,自顾自地做着表情,用手指触摸着屏幕,凭借指纹和密码证明自己。

而现在,脸又开始变得比以前更重要了,就比如人脸识别支付(听说不少兄弟被女友坑到破产了),人脸签到等等,这些前景大好的人脸识别系统都与我们的生活息息相关。

大家还记得狼叔的封山之作吧,这部电影采用了大量的CG技术,扫描人的精致细节动作,在运用建模、PS等技术添加。当时为了录制狼叔的脸部细致动作,狼叔就牺牲了自己性感的胡子。

尽管因为硬件限制,目前市面上很多和人脸相关的手机应用不能像 Animoji 那样与人脸产生强交互,如 Facedance Challenge 这样的游戏,采用的实际上是人脸图片分类技术,远远比不上 Animoji 复杂。但这并不妨碍人脸和 AI、AR 等结合产生新的交互,这是在软件与硬件共同推动下发展起来的未来。

软件在探索交互的可能。目前一般的手机前置摄像头就可以做到对人脸关键点,如轮廓、眉毛、眼睛、鼻子、嘴唇等关键部位进行坐标点追踪定位,从而分辨人的面部表情并推断情绪,配合大公司的 AI 平台,如今年 4 月的Facebook F8 大会上推出的AR Studio,艺术家们可以发掘人脸交互的各种可能,比如对着屏幕眨眨眼能「冒出很多星星」,或者张张嘴就能「喷火」,因为这些动作的丰富,人们看到了交互的新奇之处。

硬件则解决了实际中的各种困难。因为感应元件的发展,我们能让手机在黑暗之中捕捉到人脸(如 iPhone X 的红外感应元件),也能让相机将人脸看得更清楚。因为 AI 芯片的加入,人脸的数据能被实时高速处理,加上 AR 平台的支持,人们通过面部交互就能够完成过去很多不太可能做到的事。

不妨做出一个理想假设:AI 芯片目前已经可以在一些手机上实现对于场景的快速判断,从而拍出观感更佳的照片,同样的方法能否运用在对人的表情判断上呢?当手机前置相机可以快速判断出人的情绪,就能进行真正的「智能交互」,比如发现你的表情不开心时,主动为你讲笑话,或者发现你的面部信息比较痛苦时,为你拨打求救电话联系亲密的人。又或者,在用手机听老师上课时,老师们可以借助 AI 工具,了解到你目前的情绪,从而隔空对你做出更好的指导。

这些都是过去我们不曾想过的面部交互方式,在游戏之外,关于人脸交互的无数种可能,即将伴随智能手机与 AI 技术的进化而大放异彩。

题外话:那些面瘫怎么办?

编辑 / 邹政辉 张毓敏

审核 / 宇文柳欢 陈硕

  • 发表于:
  • 原文链接http://kuaibao.qq.com/s/20171221B1107U00?refer=cp_1026
  • 腾讯「腾讯云开发者社区」是腾讯内容开放平台帐号(企鹅号)传播渠道之一,根据《腾讯内容开放平台服务协议》转载发布内容。
  • 如有侵权,请联系 cloudcommunity@tencent.com 删除。

扫码

添加站长 进交流群

领取专属 10元无门槛券

私享最新 技术干货

扫码加入开发者社群
领券