小鹏汽车首席科学家郭彦东：智能感知是提升用户体验的基础

一个橘子就能骗过特斯拉的Autopilot。

特斯拉早就强调过，Autopilot只能是“智能辅助系统”。也就是说，即使开启智能驾驶模式，驾驶者仍然需要对方向盘保持控制，如果特斯拉两分钟内没有检测到驾驶员正在手握方向盘，便会发出强制性的嗡鸣警告。然而，国外一名特斯拉车主把一枚橘子卡在方向盘内圈和喇叭之间，就成功骗过了特斯拉的握持方向盘检测，在全程无手持方向盘的情况下，开了25分钟。

7月29日，在“钛媒体 2018T-EDGE 科技生活节”上，小鹏汽车首席科学家郭彦东博士从特斯拉高级辅助驾驶系统被一颗橘子骗过的案例引起现场参与者的思考。

他直言，在出现高级辅助驾驶功能之后，有的司机会出现过度依赖的现象。因此，小鹏汽车做出了这样一个思考：

在人和车互动的过程中，如何让车去更好的理解司机的状态？如何让汽车更懂中国人？

「什么是更懂中国人的 AI Car？」

第一层面，更懂路上的中国人。

其实我们路上有这样那样的行为，包括开远光灯也好，有时候人车混流也好，需要学习的其实是人的行为，人的文化，也还有人制定的政策和法规。

举个例子，在美国车跟车之间的距离是比较远的，但在中国驾驶场景当中，在等红灯的时候，车跟车的距离非常之近，哪怕非常之近的时候都有车加塞进来，这个环境当中对智能的要求，就已经超出了普通的物体检测提到的要求，智能车其实学的是人的行为、人的文化，学的是人的政策和法规。

其他几个例子包括中文的路牌、中国特色路牌，包括密集交通、人车混流，甚至中国一些特色天气下的处理，等等都给我们更懂“路上的”中国人提出一些机遇和挑战。

第二层面，更懂车里的中国人。

更懂车里的中国人，我也把它分这么两个层次讨论：

一、更懂车里的中国人，最简单的就是要求智能车听得懂中国话，认得到中国人，符合中国的驾驶习惯。

二、“懂你”。懂在车里的这一个中国人，这一个中国司机我们要懂他。为了实现这样一个目的，首先我们需要人脸识别，知道开车的是谁，他有什么样用户的画像。然后我们需要对用户的情绪状态有所感知，为什么有感知呢？因为情绪信号对我们调整车的用户体验起着关键作用。

「 智能感知是提升用户体验的基础 」

我们从用橙子骗过特斯拉的故事里看到了一丝有意思的事情：

有很多辅助驾驶功能，都包括车道线辅助、紧急刹车、盲点检测等等。我们希望能让人工智能技术真正提升用户体验跟车辆安全性，比如用智能的感知与决策把这些独立的辅助驾驶功能有机结合起来，这个车才是一个真正的智能车，才能够提高用户的体验。

我举几个例子，一方面是车外的一些感知，比如天气，比如说场景的识别、事件识别和预测。例如，一个司机在路上看到一辆校车停在路边，车门打开了，他会知道可能有小朋友从车里跑出来。这才是我们乐于看到的一个事情。

另外，跟车外的智能感知比起来，车内的感知显得更重要。包括乘客、司机的识别，以及我刚才说的注意力、情绪的识别。

我们能不能在人和车互动的过程中，让车去更好的理解司机的状态？不光是他的注意力，包括他的疲劳、情绪，做一个正向的反馈循环，来提升用户的体验，这个是我们的近期愿景。

所以，我们核心就是要把这些功能智能化，然后提升用户体验。它的基础就是智能感知。

「 三大维度构建小鹏AI Car 」

我从数据、人工智能平台、量产车从这三个方面，来跟大家分别探讨一下。

第一，数据为王。

尤其是中国用户的真实数据，不管从真实度上，还是成本效率上，还是对场景的覆盖度、数据量上，都远远地优于仿真和自有车队的数据体量。在人工智能尤其是深度学习的大环境下，其实谁坐拥了数据，谁就有可能会有最先进、最完善的技术体系。这也是整车厂商有的一个优势。我们从大量的用户中搜集用户的反馈，用这个数据不停地调教和更新我们的智能车系统。

第二，我们有了数据以后，如何去做。我们搭建人工智能平台，用大量的数据训练多个深度学习模型。

这有一个挺有意思的例子，比如我从加州回来的路上，因为天气很好，刚好前面是一个油罐车，这个油罐车很干净，它把后面的车，包括我自己的车倒影在油罐车的油罐上面去了。

如果你对这个场景没有一个特殊的理解和处理的话，很多世界上最好的计算机视觉算法，都有可能误认为倒影是真实的车道线与车辆。特斯拉曾经发生过一件很惨痛的事故，特斯拉的车没有成功地把一辆白色的大货车认成车，认为是一片云彩，也撞上去了。

还有一个案例，下面这张图其实是一个披着cosplay衣服的行人走在路上，人类司机都可以完成识别是一个行人。但是计算机视觉，由于这个人穿了一件cosplay的衣服，可能算法不一定能成功检测到是一个人。

这就对我们人工智能学习平台提出了问题——当样本不是那么常见、频次很低的时候，如何快速学习呢？其实在业界有很多这种类似的方法、技术已经被研发出来了，比如微软的custom vision，我本人也曾参加了custom vision的核心研究工作。将来也会针对小鹏汽车的特殊场景定制和打造可以快速迭代，应对小样本学习的人工智能学习平台。

第三、我们有了数据，有了人工智能训练平台，还需要有一个独特的场景，就是量产车场景。首先小鹏汽车有一个全球化的企业布局，在硅谷、广州、北京、上海、肇庆、郑州等地方都有研发和生产中心，在单车研发上投入很多。此外，我们现在也跟世界上最好的芯片厂商有紧密的合作，也签署了战略合作协议，我们将会搭载世界上算力最强的人工智能芯片之一，这样也保证我们最新的算法能够在车上跑起来，能够把用户的一些行为能够实时反馈回来。

小鹏汽车有了这样一个闭环的智能进化能力之后，就可以做到人车共存，不仅车会更懂路上的中国人，还会更懂车里的中国人。