专栏首页量子位MIT要用人工智能帮你做菜:上传美食照片,给你一份菜谱

MIT要用人工智能帮你做菜:上传美食照片,给你一份菜谱

李林 编译整理 量子位 报道 | 公众号 QbitAI

在朋友圈看见美食照片总想自己做一份?MIT来帮忙了。

MIT的计算机科学及人工智能实验室(CSAIL)本周和卡塔尔计算机研究中心(QCRI)一起训练了一个人工智能系统,名叫Pic2Recipe。给这个系统一张食物照片,它会告诉你该怎么做出来。

视频内容

Pic2Recipe能通过食物照片推断出面粉、鸡蛋、黄油等食材,然后从它的数据库中选出几份与图片最相似的菜谱推荐给你。

据CSAIL团队介绍,因为训练数据集中甜点很多,这个系统尤其“擅长”做曲奇、松饼之类的甜品,而很难教你做卷寿司、奶昔一类的食物,因为通过图片判断食材太难了。

他们还做了个网页版demo,你也可以亲自试一下: http://tuesday.csail.mit.edu:4242/

要完成这个任务,最大的障碍是没有合适的大规模训练数据集。

2014年,瑞士的研究人员们建立了一个Food-101数据集,训练出来的系统识别食物的准确率只有50%,后来几经迭代,也只达到了80%的准确率。

中国香港城市大学有个比较大的数据集,包含11万张图片和6.5万份菜谱,但是只有中餐。

于是,CSAIL的团队从All Recipes、Food.com等菜谱网站取材,建立了Recipe1M数据集,其中包含覆盖多种菜系的100万份菜谱,人工标注了其中的食材等信息。

然后,他们用这个数据集和训练了一个神经网络,让它去建立食物照片和食材、菜谱之间的关联模式。

不过据TheVerge评价,拉面、薯片、日式烧牛小排这些食物,这个系统一律认不出,汉堡会认成三明治,但是给它一张模糊的蛋糕粉的照片,倒是能给出好几种推荐菜谱。

关于Pic2Recipe的论文Learning Cross-modal Embeddings for Cooking Recipes and Food Images发表于本周的计算机视觉顶级会议CVPR上。

论文地址: http://im2recipe.csail.mit.edu/im2recipe.pdf

Demo地址: http://tuesday.csail.mit.edu:4242/

据说也挺擅长识别热狗的……

本文分享自微信公众号 - 量子位(QbitAI),作者:专注报道AI

原文出处及转载信息见文内详细说明,如有侵权,请联系 yunjia_community@tencent.com 删除。

原始发表时间:2017-07-21

本文参与腾讯云自媒体分享计划,欢迎正在阅读的你也加入,一起分享。

我来说两句

0 条评论
登录 后参与评论

相关文章

  • 加州将放宽无人车路测标准:没方向盘也行,没人类驾驶员也行

    李杉 编译整理 量子位 出品 | 公众号 QbitAI ? 加州机动车辆管理局将于明年开始允许没有方向盘、踏板、后视镜和人类驾驶员的无人驾驶汽车在该州上路测试。...

    量子位
  • GAN打一个响指,假牙就设计好了(上临床测试ing)

    因为,每个人的牙齿排列和每颗牙的咬合程度都是不一样的。一颗好用的假牙必须经过专门设计,甚至还会动用到CAD来建(牙冠)模。

    量子位
  • 苹果新推出的CoreML怎么用?有哪些bug?这里有一份教程

    安妮 编译自 Hackernoon 量子位出品 | 公众号 QbitAI 昨天,年仅18岁的iOS app开发者Alex Wulff在Hackrnoon上发布了...

    量子位
  • CuteOne – OneDrive多网盘挂载程序 快速安装方法

    始于OneDrive 却不止于OneDrive,项目地址:https://github.com/Hackxiaoya/CuteOne

    小陈先生
  • DDD理论学习系列(6)-- 实体

    1.引言 实体对应的英语单词为Entity。提到实体,你可能立马就想到了代码中定义的实体类。在使用一些ORM框架时,比如Entity Framework,实体作...

    圣杰
  • 已开源!谷歌将AutoML应用到Transformer架构,实现机器翻译最佳性能

    谷歌最新博客表示,此前在语言建模和翻译等序列任务中,Transformer架构已经展现出了极大的优势,但这些架构几乎均为手动设计,与视觉领域差异巨大。

    量子位
  • 详解nohup和& 区别 原

    不挂断地运行命令。no hangup的缩写,意即“不挂断”。一般理解&记住一个命令最简单的方法是记住它是什么缩写,就自然理解了这个命令。 nohup运行由 C...

    拓荒者
  • Centos下新增用户及提权方法

    刺_猬
  • 宅家做菜大赏:数据告诉你全民下厨都爱做些啥?

    居家隔离14天,返工继续隔离14天,漫漫无期的宅家生活已经成为年轻人们最近的日常。除了与疫情有关的最新消息,无事可做的年轻人们最关心的两件事情无非就是Tony老...

    CDA数据分析师
  • 数据猿专访 | 比邻弘科联合创始人史建刚:数据造假忍无可忍,我们要像金庸一样创造一个“不妥协的世界”

    <数据猿导读> 近年来,移动互联网浪潮席卷着中国市场。而在这次革命浪潮中,众多资本涌入,造成移动流量推广行业迅猛发展的同时,也滋生了很多产业泡沫,其中最大的泡沫...

    数据猿

扫码关注云+社区

领取腾讯云代金券