专栏首页新智元Nature再发DeepMind研究:AI复现大脑网格细胞模拟导航!

Nature再发DeepMind研究:AI复现大脑网格细胞模拟导航!


新智元报道

来源:DeepMind

编辑:肖琴

【新智元导读】今天,DeepMind在Nature上发表的一篇论文引起AI领域和神经科学领域的极大震撼:AI展现出与人脑“网格细胞”高度一致的空间导航能力。这项发现有助于AI的可解释性和把神经科学作为新算法的灵感来源的重要意义。

大多数动物,包括人类,都能够灵活地驾驭他们生活的世界——在新的地方探索,迅速返回到记忆中的地方,同时能够“抄近路”。这些能力如此简单和自然,以至于很少人在意其底层流程究竟有多复杂。相比之下,虽然AI在围棋等许多任务超过了人类,空间导航能力对于人工智能体来说仍然是一个巨大的挑战

2005年,一项惊人的研究发现揭示了空间行为中神经回路一个关键部分:当动物在探索它们所处的环境时,神经元的激发呈现出一种非常规则的六边形网格

这些网格被认为有利于空间导航,类似于地图上的网格线。

除了作为动物的内部坐标系之外,这些神经元——被称为网格细胞(grid cell)——最近也被假设为支持基于矢量的导航。即:让大脑计算出到达目的地的距离和方向,“像乌鸦飞行一样”,即使以前没有走过确切的路线,动物也可以在不同地点之间直接旅行。

首次发现网格细胞的研究团队共同获得2014年的诺贝尔生理学或医学奖,他们的研究揭示了空间的认知表征工作的方式。但从网格细胞被发现以来,经过10多年的理论论证,网格细胞的计算功能,以及它们是否支持基于矢量的导航,在很大程度上仍然是一个谜。

DeepMind今天发表在Nature上的论文“Vector-based navigation using grid-like representations in artificial agents”中,研究人员开发了一种人工智能体(artificial agent)来测试“网格细胞支持基于矢量的导航”这一理论。

视频内容

研究人员首先训练了一个循环网络来执行在虚拟环境中定位自身的任务,主要使用与运动相关的速度信号。哺乳动物处于不熟悉的地方或不容易发现地表的地方(如在黑暗中行走)时,这种能力会自然地激发。

研究人员发现,类似网格般的表示(grid-like representation,以下称“网格单元”)自发地出现在网络中,这与在哺乳动物中观察到的神经活动模式惊人的一致,也与网格单元为空间提供高效代码的观点一致。

图:用agent进行的实验产生了类似网格的表示(“网格单元”),它们与哺乳动物中的生物网格细胞非常相似。

接下来,研究人员试图通过创建一个artificial agent来作为实验小白鼠,要测试的理论是:网格细胞支持基于矢量的导航

这是通过将最初的“网格网络”与一个更大的网络架构相结合,形成了一个agent,可以使用深度强化学习在具有挑战性的虚拟现实游戏环境中导航进行训练。

这个agent的表现超过了专业游戏玩家的能力,展现出动物一般的灵活导航方式,当游戏环境中可以有捷径时,agent会“抄近路”。

通过一系列实验操作,研究人员发现网格单元对于基于矢量的导航至关重要。例如,当网络中的网格单元被掐断时,agent的导航能力就会受损,而且对目标的距离和方向的判断等关键指标的表示变得不那么准确。

图:具有网格单元的基于矢量的导航的图示。底部的圆圈表示3个不同尺度的网格单元类群,有颜色的细胞是活跃的。当agent移动时,网格单元(表示“当前的网格代码”)会发生变化,以反映agent进入了不同的触发区域。网格单元用于计算目标的最短路径。

DeepMind认为,这一研究是理解大脑中网格细胞的基本计算目的的重要一步,同时也突出了它们对人工智能agent的好处。这些证据为“网格细胞提供欧几里德空间框架,支持基于矢量的导航”的理论提供了有利的支持。

此前研究人员对网格细胞进行的广泛的神经科学研究提供了在试图理解其内部表示的线索,有助于agent的可解释性——这本身就是人工智能研究中的一个主要话题。

这项工作还展示了在虚拟现实环境中使用人工agent积极参与复杂行为,以测试大脑工作原理的潜力。

更进一步,类似的方法可以用来测试那些对感知声音或控制肢体有重要意义的大脑区域的理论。未来,这样的网络很可能为科学家们提供一种新的方法来进行“实验”,提出新的理论,甚至对目前在动物身上进行的研究提供补充。

DeepMind的联合创始人兼CEO、该研究的联合作者Demis Hassabis说:“要证明我们现在致力于构建的通用智能是可行的,人类的大脑是我们现有的唯一证据,因此,把神经科学作为新算法的灵感来源是有意义的。”

针对DeepMind这项研究,国内外众多专家给与评价,新智元整理如下:

杜克大学陈怡然教授:

春鹏同学评论道:论文中提到的两个细节值得注意。第一,如果神经网络的损失函数中不包括正则项,那么神经网络无法表现出网格细胞功能。这一发现给了我们一个全新的角度去思考正则项的作用。第二,论文指出深度神经网络的“黑盒”特点阻碍了进一步分析网格细胞活动特性对路径整合的作用。这一点再次印证了当前研究神经网络可解释性的必要。

中科院自动化所何晖光:

在这项工作中,研究人员首先训练循环神经网络基于运动速度信息在虚拟环境中定位。这与哺乳动物在不熟悉环境中运动定位所用到的信息非常类似。令人震惊的是,类似网格细胞的模式,研究人员称之为网格单元,在神经网络中自然出现,如上图所示!人工智能的定位方案,与大自然亿万年进化所得到的答案,高度一致。

中科院计算所研究员、中科视拓创始人、董事长兼 CTO 山世光:

基于数据进行学习后得到的人工神经网络中的规律和模式与长期进化而来的生物神经系统有相似之处——出现这样的可能性是偶然还是必然,这确实是很有趣,很值得探索的方向。

新加坡南洋理工大学黄广斌教授:

这也再次说明AI发展突飞猛进,国内和国外在AI算法上的差距越来越大。国内许多AI公司还处在重复使用开源算法阶段。除了讲故事、描绘理想,专家们也需要带头低调踏实做研究。

本文分享自微信公众号 - 新智元(AI_era)

原文出处及转载信息见文内详细说明,如有侵权,请联系 yunjia_community@tencent.com 删除。

原始发表时间:2018-05-10

本文参与腾讯云自媒体分享计划,欢迎正在阅读的你也加入,一起分享。

我来说两句

0 条评论
登录 后参与评论

相关文章

  • 【重磅】英特尔收购计算机视觉公司Movidius,他们的战略你看懂了吗?

    1 新智元报道1 记者:闻菲,胡祥杰 英特尔今天下午宣布,收购初创公司 Movidius,深入机器视觉战场。交易价格未公布。 这笔交易将使英特尔进一步深入火热的...

    新智元
  • 英特尔今天50岁,一文看尽芯片50年发展史

    【新智元导读】7月18日,英特尔迎来了它50周岁的生日。这位CPU巨头50年来曾带来PC市场的辉煌,如同PC时代的催化剂,只要有计算的地方就有他的身影;他也曾一...

    新智元
  • ELECTRA:超越BERT,19年最佳NLP预训练模型

    BERT推出这一年来,除了XLNet,其他的改进都没带来太多惊喜,无非是越堆越大的模型和数据,以及动辄1024块TPU,让工程师们不知道如何落地。

    新智元
  • 前端-CSS Grid中的陷阱和绊脚石

    2017年3月,CSS Grid在几个星期内就被发送到Chrome、Firefox和Safari的生产版本中。很高兴,大家可以使用它来解决实际问题。

    grain先森
  • 从STL文件到网格拓扑

    STL文件是网格文件的一种格式,分为二进制和文本两种类型。具体来讲,它定义了一群三角面片,比如下面是一个文本的STL示例:

    NT4.4
  • Grid R-CNN解读:商汤最新目标检测算法

    Grid R-CNN是商汤科技最新发表于arXiv的一篇目标检测的论文,对Faster R-CNN架构的目标坐标回归部分进行了替换,取得了更加精确的定位精度,是...

    CV君
  • 四边形网格

    正向建模软件可以直接创建四边形网格。逆向建模的网格一般是三角形网格,需要方法把三角形网格转成四边形网格

    NT4.4
  • 神经网格流:通过微形流生成3D流形网格

    中文摘要:网格是虚拟世界中物理3D实体的重要表示。诸如渲染,模拟和3D打印之类的应用程序要求网格是多方面的,以便它们可以像它们所代表的真实对象那样与世界交互。现...

    用户7454122
  • DeepMind重大突破:AI进化出大脑级导航能力,像动物一样会“抄小路”

    DeepMind团队称,其最新研发出的一个人工智能程序具有类似哺乳动物一样的寻路能力。

    AI科技评论
  • DeepMind 重大突破:AI 进化出大脑级导航能力,像动物一样会“抄小路”

    继在围棋棋盘上轻松战胜人类后,AI似乎在对空间的认知和巡航能力上也要将人类“踩在脚下了。

    刀刀老高

扫码关注云+社区

领取腾讯云代金券