《黑镜》黑科技成真 | 解码脑电信号,AI重构脑中的画面

原作 TIM COLLINS Root 编译自 Dailymail 量子位 出品 | 公众号 QbitAI

上周五,一贯借黑科技刻画人性阴暗面的英剧《黑镜》刚出第四季,其中第三集《鳄鱼》的提到的视觉记忆提取,就已经被日本科学家Yukiyasu Kamitani实现了。相关工作Deep image reconstruction from human brain activity已经发表在biorxiv上。

京都大学脑情报研究所所长Yukiyasu Kamitani教授

基于人脑fMRI扫描数据,Tomoyasu Horikawa带领的研究团队新开发的算法可以根据脑血管中血流的变化来检测的脑电信号,然后运用神经网络把人脑中的画面高清度地重现出来

有了这项技术,以后就可以轻易地知道一个人曾经发生过什么事,去过哪些地方,甚至连白日做梦的场景都可以被读取出来。

对于那些已经成为植物人的患者来说,读取他们大脑里存储的回忆,可能是他们的爱人连接他们的唯一方式。

《黑镜》S4E3 Crocodile的提到的视觉记忆提取器

论文一作Tomoyasu Horikawa说,“我们发现,不管志愿者看到的图是自然的还是人工合成的,解码后生成的图还原度很高,或者可以反映出来看图时的主观感受。”

志愿者脑里想字母或者是动物,都可以被解码出来

Horikawa还提到,“即使这种算法只用自然图像训练过,但依然可以成功地重构人工合成的图像。说明我们的模型是根据脑电活动来重构图像的,而不是简单地匹配学习过的例子。”

根据fMRI扫描的数据,神经网络可以预测出看到物体的特征。比如说这个鬣蜥。
3个志愿者被要求盯着动物的图片看,比如说猫头鹰。
在志愿者看的时候,研究团队会同时观察他们的脑部活动。
该神经网络经过50张自然图像的训练,比如像这个天鹅。

研究团队还使用了第二种算法,DGN(深度生成网络),来检查所生成的图像看起来是否足够逼真,然后想办法优化,使得它们更容易被识别。

团队使用的第二种算法,DGN,用于优化图像真实度的深度生成网络

这项研究,是延续Kamitani教授之前的fMRI解码脑电工作。

根据发表在Nature Communications论文Generic decoding of seen and imagined objects using hierarchical visual features称,研究团队是通过分层处理视觉特征,来决定所观察物体的种类,比方说可以区分出乌龟和蜥蜴。

Kamitani坦言,“虽然,还原出来的图像清晰度因人而异,但是这项技术的意义,是打开了一个全新的窗口,让我们可以更加了解人的内心世界。”

不同人的脑电信号不同,还原出来的图也不尽相同

当志愿者看到同一张图片时,研究团队发现脑电活动是存在一定模式和规律的。

训练的图像还包括了各种符号或几何形状

伦敦大学学院的神经影像专家Geraint Rees认为,这项技术会带来翻天覆地的变化。他对AI能够辨识从来没学过的字母感到十分震惊。“他们(在解码脑电重构图像的)早期工作是个巨大的进步。”

最后,附原文链接: http://www.dailymail.co.uk/sciencetech/article-5231179/AI-create-images-based-pictures-looking-at.html

以及新发表的论文链接: https://www.biorxiv.org/content/biorxiv/early/2017/12/30/240317.full.pdf

解码脑电开山论文: https://www.nature.com/articles/ncomms15037#f1

原文发布于微信公众号 - 量子位(QbitAI)

原文发表时间:2018-01-04

本文参与腾讯云自媒体分享计划,欢迎正在阅读的你也加入,一起分享。

发表于

我来说两句

0 条评论
登录 后参与评论

相关文章

来自专栏机器之心

入门 | 关于TensorFlow,你应该了解的9件事

我总结了今年 Google Cloud Next 大会上我最爱的一段演讲——What's New with TensorFlow?(https://www.yo...

14340
来自专栏AI科技评论

业界 | 一文看懂谷歌 NYC 算法与优化业务全景(附重点论文下载)

AI 科技评论消息,众所周知,谷歌的研究团队遍布世界各地,而纽约自然也是非常重要的一个地点,尤其是多个谷歌算法研究小组的孕育地。目前,谷歌算法优化团队为谷歌产品...

37060
来自专栏人工智能快报

谷歌开源机器学习框架TensorFlow 1.0

据外媒报道,在美国加利福尼亚州山景市举行的首届TensorFlow开发峰会上,谷歌发布了代表人工智能发展趋势的TensorFlow深度学习开源框架1.0版。谷歌...

31550
来自专栏人人都是极客

AI 芯片和传统芯片的区别

比如,自动驾驶需要识别道路行人红绿灯等状况,但是如果是当前的CPU去算,那么估计车翻到河里了还没发现前方是河,这是速度慢,时间就是生命。如果用GPU,的确速度要...

16540
来自专栏TEG云端专业号的专栏

全国知识图谱与语义计算大会 - 实体发现与链接比赛总结

一 背景 互联网大数据时代中,随着机器语义理解需求的日益增长,知识图谱,即各类实体、概念及其之间的语义关系,日益成为大数据时代知识表示的主要形态之一,并在学术界...

1K70
来自专栏量子位

迁移学习比赛:OpenAI喊你重温「音速小子索尼克」

可算法的训练和测试环境都是同一个,这就会让那些本身带有超参数和靠死记硬背的算法获得不错的结果。

9210
来自专栏新智元

论文 | 预测 API 从谷歌、亚马逊等大平台盗取机器学习算法

2016年10月18日, 世界人工智能大会技术分论坛,特设“新智元智库院长圆桌会议”,重量级研究院院长 7 剑下天山,汇集了中国人工智能产学研三界最豪华院长阵容...

40360
来自专栏数据派THU

9款超赞的AI开源项目!| 本周Github精选

48040
来自专栏腾讯大数据的专栏

面试干货!21个必知数据科学面试题和答案

最近KDnuggets上发的“20个问题来分辨真假数据科学家”这篇文章非常热门,获得了一月的阅读量排行首位。 但是这些问题并没有提供答案,所以KDnuggets...

37180
来自专栏企鹅号快讯

机器视觉技术原理解析及应用领域

01 简介 机器视觉是一项综合技术,包括图像处理、机械工程技术、控制、电光源照明、光学成像、传感器、模拟与数字视频技术、计算机软硬件技术(图像增强和分析算法、图...

95160

扫码关注云+社区

领取腾讯云代金券