学界 | DeepMind眼中的神经科学研究:人工智能进步的另一个重要支点

AI 科技评论按:继神经科学家成为机器学习领域会议的邀请演讲的常客以后,DeepMind AI 博客今天也发出了一篇文章讲述他们对人工智能研究和神经科学研究协作的看法。他们觉得两个领域的协作不仅很有好处,而且现在已经变得紧迫。AI 科技评论编译如下。

人工智能近期取得了举世瞩目的成果,在学会玩 Atari 游戏、下围棋、德州扑克以后,它们现在生成的手写文本和对话也几乎跟人类的一样,可以做多种语言的翻译,甚至可以把生活照片变得和梵高的大作一样(https://deepart.io/)。这些进步要归功于新的统计方法和计算机不断增加的计算能力等一些原因。不过在一篇近期发表于「神经元」期刊的文章中(http://www.cell.com/neuron/fulltext/S0896-6273(17)30509-3),DeepMind的研究者们提出了这样的一个观点:来自实验和理论神经科学的想法对人工智能研究也大有帮助,而且往往被忽视了。

心理学和神经科学在 AI 的发展历程中扮演过重要的角色。Donald Hebb、Warren McCulloch、Marvin Minsky、Geoff Hinton 这些奠基人一开始的动力都是想要弄清大脑是如何工作的。然而实际上,从上个世纪晚期以来,在神经网络发展过程中起到重要作用的研究大多数都不是在数学和物理实验室中完成的,而要归功于心理学和神经生理学学科的研究者们。

在充满了挑战的现在,神经科学和人工智能领域携手研究的需求前所未有地强烈。

DeepMind的研究人员们认为,即便这两个领域都在飞速发展,研究者也应当抱有这种远见。他们急切地希望神经科学的研究者们可以和人工智能的研究者们一起找到一种共同的语言,可以让知识在两个领域之间自由地流动,从而推动两个领域内研究的长期共同进步。

DeepMind的研究人员们觉得 AI 研究中一个重要的因素是从神经科学中获得灵感,有两个原因。首先,神经科学可以帮助验证已有的 AI 技术。简单来说,如果研究者们发现的某些算法能够模仿大脑中的某个功能,这很有可能意味着这些研究是想着正确的方向去的。第二条原因是,神经科学可以在构建人造大脑时为新的算法类型和架构提供丰富的启发。以往的 AI 实现方案几乎都是基于逻辑的方法和理论性的数学模型,DeepMind的研究人员们认为神经科学可以发现多种可能对认知功能起到关键作用的生物计算方式,这样就可以对现有的方法和模型做出补充。

举一个近期的例子,经验的离线“回放”就是神经科学界的启发性的发现(http://www.sciencedirect.com/science/article/pii/S0166223610000172?via%3Dihub)。生物大脑在活动期间会产生一些神经活动,然后在之后的睡眠或者安静休息的时候,大脑就会“回放”这些活动的短期模式。比如,当老鼠穿过迷宫的时候,跟地点相关的细胞就会在老鼠四处移动的过程中一直活动。等到老鼠休息的时候就可以再次在它的大脑中观察到同样的神经活动序列,仿佛老鼠们正在脑中想象它们当时的行动,然后用它们来优化未来的行为。这种猜测也得到了证实,如果干扰它们的“回放”过程,就会影响它们稍后再次进行同样任务时的表现。

DQN网络是一类通用智能体,它们可以持续地让自己的行为适应新环境,而“回放”就是DQN网络中的关键元素

如果说要造一个需要“睡觉”的智能体,听起来仿佛怪怪的,毕竟它们本来应该在制造它们的人睡觉以后还要能够反复琢磨计算问题才行。不过这种模式是 DeepMind 的 deep-Q 网络(https://deepmind.com/research/dqn/)的关键部分,这个算法已经学会了搞定各种 Atari 2600游戏,表现远超人类,还仅仅需要原始的显示像素点和游戏分数作为输入就可以做到。这个 DQN 就通过存储一部分训练数据然后“离线”重看的方式模仿了“经验回放”,让它能够再次从以往的成功或失败中学习。

类似这样的成功的验证成果让DeepMind的研究人员们有了很多信心,神经科学已然成为了他们的 AI 研究思路的重要来源。但是如果着眼未来,在他们需要帮忙解决高效学习、现实世界理解、想象等未解问题的时候,神经科学将会变得不可或缺。

想象力是人类和动物具有的一种非常重要的能力,让我们无需行动就可以对未来情境做出规划,避免了不少成本付出。举个简单的例子,比如规划假期,我们就要运用我们对世界的知识(脑内的“模型”),然后靠它对未来会发生什么做出预测,评估未来的状况,这样我们就可以决定要选哪条路、或者要装哪些晴朗的天气里穿的衣服。最前沿的人类神经科学研究已经开始能够揭露这种思考方式背后的计算和系统机制,但是真正应用到人工智能模型中的这些新理解还非常少。

神经科学和人工智能之间的历史故事悠久缠绵

另一件现代 AI 研究中的重要挑战是迁移学习,为了能够高效地应对新的状况,人造智能体们需要这种在现有知识基础上做出合理决定的能力。这方面人类已经很擅长了,随便一个会开车、会用电脑、能主持会议的人在面对不熟悉的汽车、不熟悉的操作系统、不熟悉的社交状况的时候都能够对付得来。

为了研究把这种能力赋予人造系统的可能性,研究者们已经开始着手做初步的尝试。比如一类称作“渐进网络”(https://arxiv.org/abs/1606.04671)的新的网络架构就可以学会一个电脑游戏以后,根据这些知识学会玩另一个游戏。同样的架构也可以用来把从模拟机器人手臂上学到的知识迁移到真实的机器手臂上,极大地减少了训练时间。有意思的是,这些网络跟人类的序列学习模型(http://science.sciencemag.org/content/344/6191/1481.long)有一些共同点。这些诱人的联系表明了未来的 AI 研究会有很多从神经科学的研究中学习的机会。

不过DeepMind的研究人员们认为知识的交换不应该是单向的,神经科学也可以从 AI 研究中获益。比如强化学习这一现代 AI 研究的主要方法之一,最开始来自于心理学领域的动物学习理论,然后被机器学习的研究者们发扬光大。这些想法后来也反哺回了神经科学研究中,帮助我们理解一些神经生理学现象,比如哺乳动物基底神经节中多巴胺神经元的激活特性(http://science.sciencemag.org/content/275/5306/1593.long)。

这种来回交流对两个领域借助对方的见解不停发展至关重要,从而构建了一个正向的循环,其中 AI 研究者运用神经科学的想法构建新的技术,神经科学家可以从人造智能体的行为中更好地学习如何阐释生物大脑。确实,这样的循环能够得到加速,近期的技术发展功不可没,比如光遗传学就可以让我们精确地测量和控制大脑活动,从中获取的大量数据还可以用机器学习领域的工具进行分析。

所以DeepMind的研究人员们认为把智慧转化为算法,然后把算法和人类大脑相比较,已经成为当前至关重要的事情。他们希望 AI 可以成为创造新知识、推进科技探索前沿的工具,那么这样的做法不仅可以支持对 AI 的研究,更可以让大家更加理解自己的大脑中都发生了什么。这有可能照亮神经科学中最难解的神秘问题,比如创造力和梦的本质,甚至有一天可以解释意识是怎么回事。面对着这么多难题,让神经科学和人工智能联手向前已经变得前所未有地紧迫。

via DeepMind Blog ,AI 科技评论编译

论文地址:http://www.cell.com/neuron/fulltext/S0896-6273(17)30509-3

原文发布于微信公众号 - AI科技评论(aitechtalk)

原文发表时间:2017-08-03

本文参与腾讯云自媒体分享计划,欢迎正在阅读的你也加入,一起分享。

发表于

我来说两句

0 条评论
登录 后参与评论

相关文章

来自专栏大数据文摘

快速入行数据科学,老司机带你避开这九个大坑!

1293
来自专栏Python数据科学

如何进阶成为一名数据科学家?

来源 | https://github.com/AAAlvin/Project_Folder/

574
来自专栏ATYUN订阅号

Smartcat为翻译自动化平台募集了700万美元

近年来,机器翻译变得越来越强大,无数的在线工具和应用程序可以作为自己学习新语言的艰难过程的不错选择。

671
来自专栏CDA数据分析师

一首写给数据分析初学者的诗……

来自数据的力量 您好,喜欢数据分析的初学者: 十年生死两茫茫 数据人,忙忙忙 良辰美景,平添我凄凉 一天早晚闲不住 调研急 报告狂 夜来思路忽闪现 寻笔记 怕遗...

1808
来自专栏CDA数据分析师

译文|大数据对中小企业意味着什么?

大企业or小企业 对于中小企业在小型和个人数据集上使用大数据技术,我能看到大量优势,但是对它们而言也有很多理由来关注一下大数据本身。最近的一项调查中...

1838
来自专栏Java学习网

程序员如何在职场中实现“跨越式”成长?

程序员如何在职场中实现“跨越式”成长? 最近我开始计划系统的梳理目前的产品:看系统后台数据;对核心用户做访谈;细分用户类别;梳理、分析业务场景;给出后续对产品的...

2435
来自专栏CDA数据分析师

写给新手,关于数据分析师职业前景!

做数据分析前我们首先要明确分析目的和内容,对于数据分析师而言,他们的进阶需求无外乎是各个企业对数据分析师的职位要求。在前程无忧、中华英才网以及智联招聘上,我们随...

5459
来自专栏大数据挖掘DT机器学习

谁说文科生不能做数据分析?如何速成数据分析师

“数据分析”是一个含义颇为宽泛的概念,并且,在这个数据化的时代,这个概念几乎是无处不在的。为了保证内容的有效性,在这里仅提供我了解的一些方面。 我接触的数...

3956
来自专栏大数据挖掘DT机器学习

写给新手,关于数据分析师职业前景

做数据分析前我们首先要明确分析目的和内容,对于数据分析师而言,他们的进阶需求无外乎是各个企业对数据分析师的职位要求。在前程无忧、中华英才网以及智联招聘上,我们随...

3225
来自专栏AI科技大本营的专栏

跟风Google Brain,Facebook AI研究机构启动见习项目

2015年,Google Brain公布了其帮助机器学习研究者进阶的见习项目,研究内容灵活、薪资福利又高、发展机会应有尽有,瞬间吸引了大量的申请者,其中甚至还有...

2716

扫码关注云+社区