苹果刚刚发布的A12芯片到底有多仿生?一文看懂神经网络超级引擎!

前言

几个小时前的苹果秋季新品发布会上,发布了三款iPhone新机,统统搭载了动力强劲的A12仿生芯片。相比于去年iPhone X上的A11仿生芯片,A12有哪些性能提升?可以支持什么新功能一文解答所有疑惑,文末有彩蛋。

从A11到A12,神经网络引擎大爆炸

2017年发布的A11芯片和今晨发布A12芯片

2017年9月17日的iPhone X发布会上,苹果发布了“可以自己学习”的处理器——Apple A11“仿生”(Bionic)芯片,这是iPhone上有史以来最强大、最智能的芯片,也是iPhone X身上一众黑科技的真正来源。

苹果在A11芯片上首次搭载了专门用于机器学习的硬件——“神经网络引擎”(neural engine),每秒运算速度最高可达6000亿次。为什么iPhone X的Face ID敏捷精准?全靠A11“仿生”芯片的加持!

而刚刚过去的苹果新品发布会上,“仿生”芯片迎来大升级,神经网络运算速度提高8倍,达到了惊人的每秒5万亿次!

20亿张图片训练集!

可能用了你的照片

每一天,我们都通过图像来和iPhone打交道,在神经网络被广为使用之前,苹果只能通过硬件的提升和传统的算法的应用来优化体验,而A12则完全使用神经网络来优化和图像相关的每一个细节

神经网络的表现效果与训练数据量密切相关,而财大气粗的苹果在这方面也毫不吝惜,使用了整整20亿张图片来训练神经网络算法,而苹果的全球用户量已经近10亿人,虽然苹果并未说明20亿张图片的来源,但如果来源于用户的话,意味着每个用户都至少为苹果提供了两张照片。

单镜头也能控制景深

毫无疑问,强大的神经网络会率先优化拍照体验,虚化效果已经不再是双镜头的专利,即使是前置单摄像头,凭借神经网络引擎的加持,一样可以形成背景虚化效果。

此外,A12和先进的神经网络算法能够让照片更鲜艳和自然:焦外成像、精神控制、智能HDR甚至是灯光效果都能在A12伸进网络引擎的加持下表现更好。

IPhone XR前置摄像头的背景虚化效果。

A12芯片带来哪些改变?

多个场景下的全面加持

有了这么强的神经网络,苹果会着重优化哪个方面的体验呢?如果你认为仅仅是拍照,那就拿衣服了。答案是——几乎你能想到的和你想不到的所有方面,比如:

面容ID(Face ID):Face ID是最早由iPhone X带来的功能,使用人脸的3D结构解锁,但却不只是简单的3D结构匹配——黑客们早已证明,使用简单的3D打印人脸模组是不能骗过Face ID的,这其中的原因之一便是由神经网络和机器学习加速和加固了整个认证过程。

苹果官网:Face ID

表情采集:最新的A12仿生技术+深度摄像头,现在的苹果可以采集你的50多个表情,甚至包括舌头的动作,把你变成活的表情包

Animoji技术:生成你自己的表情包

手上沾水也能用?:新的iPhone 增加了防水功能,但防水仅仅是“防止水进入iPhone内部吗”,远非如此,新的智能算法可以协助识别哪些点击是雨水,哪些点击是真的手指触碰,让你可以在雨中也能使用你的新手机。

更好的增强现实效果:App 可利用原深感摄像头和 A12 仿生,打造丰富、细致的背景并生成各种三维特效。

苹果官网:A12增强现实特效

为什么叫“仿生”?硬件上的A12

为什么A12不再被叫做“处理器”而改名为“仿生芯片”?这是因为A12中不只有中央处理器:CPU,还有专门设计的神经网络引擎——这能够大大加速神经网络的运转过程(每秒5万亿次),让每一个使用神经网络处理的运算都能更快。

当然,如果你是开发者的话——A12的神经网络引擎已经开放给 Core ML 平台,你可以把实时的机器学习应用到自己的 app 中,让学习就在你的 iPhone 上进行。

苹果官网:A12仿生芯片

彩蛋1:面容ID如何更安全?

好莱坞面具师化妆师齐上阵

Face ID最大的槽点就是识别准确率。2017年9月iPhone X亮相,在全球首秀上,Face ID当场严重打脸,刚刚吹完PPT的苹果软件工程主管Craig Federighi对着前置摄像头看了半天也没解开,尴尬地摸了摸脸。

2017年9月iPhone X发布会,解锁失败,请输入密码

虽然事后苹果澄清这是因为在演示之前已经被多人使用Face ID测试,已经锁定,所以才需要密码。但这个“事故”还是为Face ID蒙上了阴影。此后一年,关于“卸妆无法识别”、“睡觉被识别”、“双胞胎识别错误”的事件层出不穷,虽然段子居多,但也说明了iPhone X上的Face ID仍有待改进。这次苹果再次请好莱坞大师出马——

想靠假面蒙我?A12:好莱坞面具大师教我看透你们!

作为世界电影工业中心,好莱坞每年都要大量使“假面”以假乱真,全球顶级的面具制造师、化妆师汇聚于此。苹果和好莱坞合作,用电影级的欺骗效果,来训练A12的神经网络。经受最强套路训练的A12神经网络,识别能力更上层楼。眼镜、发型、围巾、胡子,统统不是问题。

彩蛋2:苹果A12,华为麒麟980

谁才是第一款7纳米芯片?

8月31日,华为在柏林国际电子消费展览会上发布了采用7nm晶体管工艺的麒麟980芯片,跑分相当恐怖…比起业界普遍采用的10nm工艺,性能提升20%,效能提升40%,晶体管密度提升1.6倍。华为官宣:麒麟980是全球首款商业7nm手机芯片!

搭载麒麟980芯片的华为mate20,将于10月16日发布

半路杀出程咬金,苹果A12发布了!

华为麒麟980只是独立发布,真正应用要等到10月16日才会在伦敦正式发布华为Mate20手机,而此次苹果发布会,搭载A12仿生芯片的iPhone Xs、iPhone Xs Max、iPhone XR 率先上阵,金色iPhone Xs即将开售。

华为苹果,谁是头名?两边各有说法,用户只看手机。

计算机视觉中的深度学习技术

2小时快速了解

智能手机中的每一个图像处理功能都能够看到深度学习的影子,在未来,深度学习还将毫不留情的侵占更多领域——没关系,集智学园帮你搭上快车:

也可在PC端登录观看:

https://campus.swarma.org/gcou=10486?s=3c06b650

关注集智AI学园公众号

获取更多更有趣的AI教程吧!

搜索微信公众号:swarmAI

学园网站:campus.swarma.org

商务合作和投稿转载|swarma@swarma.org

  • 发表于:
  • 原文链接https://kuaibao.qq.com/s/20180913G0HW7N00?refer=cp_1026
  • 腾讯「腾讯云开发者社区」是腾讯内容开放平台帐号(企鹅号)传播渠道之一,根据《腾讯内容开放平台服务协议》转载发布内容。
  • 如有侵权,请联系 cloudcommunity@tencent.com 删除。

扫码关注腾讯云开发者

领取腾讯云代金券