腾讯云
开发者社区
文档
建议反馈
控制台
登录/注册
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
首页
学习
活动
专区
工具
TVP
最新优惠活动
返回腾讯云官网
深度学习计算机视觉
专栏成员
举报
67
文章
91676
阅读量
30
订阅数
订阅专栏
申请加入专栏
全部文章(67)
编程算法(22)
java(21)
其他(7)
数据结构(7)
数据挖掘(3)
深度学习(3)
机器学习(2)
python(2)
神经网络(2)
网络安全(2)
opencv(2)
socket编程(2)
uml(2)
https(2)
需求分析(2)
人脸识别(1)
qt(1)
数据库(1)
api(1)
linux(1)
ubuntu(1)
spring(1)
http(1)
存储(1)
游戏(1)
图像识别(1)
卷积神经网络(1)
正则表达式(1)
erp(1)
hashmap(1)
监督学习(1)
自动化测试(1)
pytorch(1)
tcp/ip(1)
无监督学习(1)
迁移学习(1)
setter(1)
编程(1)
接口(1)
软件开发(1)
搜索文章
搜索
搜索
关闭
何恺明等NeurlPS新作:定义迁移学习新范式
迁移学习
深度学习
监督学习
无监督学习
【摘要】基于深度学习的迁移学习的主流方法一般是从一个任务中学习到可迁移到其他任务的通用特征向量,例如语言中的单词嵌入和视觉中的预训练卷积特征(比如imagenet model 的预训练也是一种迁移),也就是在特征层面做迁移。然而,这些方法通常只是迁移一元特征,却很大程度上忽略了更结构化的图结构表征。本文探索了从大规模未标记数据中(无监督学习)学习捕获数据单元对(例如单词或像素)之间依赖关系的通用隐藏关系图,并将这些图传递给下游任务的可能性。我们提出的迁移学习框架提高了各种任务的性能,包括问答系统、自然语言推理、情感分析和图像分类。我们的测试还表明,学习到的图形是通用的,在图没有经过训练的情况下,可以迁移到不同嵌入(包括 GloVe 嵌入、ELMo 嵌入和任务特定的 RNN 隐藏单元)或无嵌入单元(如图形像素)。
张俊怡
2018-12-26
737
0
没有更多了
社区活动
【纪录片】中国数据库前世今生
穿越半个世纪,探寻中国数据库50年的发展历程
立即查看
Python精品学习库
代码在线跑,知识轻松学
立即查看
博客搬家 | 分享价值百万资源包
自行/邀约他人一键搬运博客,速成社区影响力并领取好礼
立即体验
技术创作特训营·精选知识专栏
往期视频·千货材料·成员作品 最新动态
立即查看
领券
问题归档
专栏文章
快讯文章归档
关键词归档
开发者手册归档
开发者手册 Section 归档