首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往
您找到你想要的搜索结果了吗?
是的
没有找到

脑影像中的深度学习研究:前景与挑战

深度学习(DL)在应用于自然图像分析时非常成功。相比之下,将其用于神经影像学数据分析时则存在一些独特的挑战,包括更高的维度、更小的样本量、多种异质模态以及有限的真实标签(ground truth)。在本文中结合神经影像学领域的四个不同且重要的类别讨论了DL方法:分类/预测、动态活动/连接性、多模态融合和解释/可视化。本文重点介绍了这些类别中每一类的最新进展,讨论了将数据特征和模型架构相结合的益处,并依据这些内容提出了在神经影像学数据中使用DL的指南。对于每一个类别,还评估了有希望的应用和需要克服的主要挑战。最后讨论了神经影像学DL临床应用的未来方向。

03

CVPR 2018 | 逆视觉问答任务:一种根据回答与图像想问题的模型

随着传统的目标检测和目标识别方法的发展,很多问题已经得到了解决,人们对于解决更具挑战性的问题的兴趣也在激增,这些问题需要计算机视觉系统更好的「理解」能力。图像描述 [31]、可视化问答 [2]、自然语言对象检索 [20] 和「可视化图灵测试」[11] 等都存在要求丰富的视觉理解、语言理解以及知识表征和推理能力的多模态 AI 挑战。随着对这些挑战的兴趣不断增加,人们开始审视能够解决这些问题的基准和模型。发现意想不到的相关性、提供找到答案的捷径的神经网络,到底是针对这些挑战取得的进展,还是只是最新的类似于聪明的汉斯 [29,30] 或波将金村 [12] 这样的矫饰结果呢?

00

重要突破!大连理工大学团队实现「线驱动连续型机器人多模态感知」登国际权威期刊

大数据文摘转载自机器人大讲堂 你知道什么是连续型机器人吗?这类机器人可以称得上是机器人中的“眼镜蛇”,以其强悍的灵活性和柔顺性著称。它们在医疗介入手术、狭小空间检测、工业及生活辅助等非结构化环境中具有十分广泛的应用场景。 例如用于微创手术的达芬奇Vinci SP介入手术机器人、美国Tesla公司的蛇形充电机器人以及德国Festo公司的柔性机械臂等。 那么问题来了,同是机器人,为什么它们这么灵活?原因在于连续型机器人通过颠覆传统刚性机械臂的结构设计,使得自身具备大量冗余“自由度”,进而实现灵活运动和柔顺变

04

【干货】让遥感图像活起来:遥感图像描述生成的模型与数据集探索

【导读】当下,深度学习在人类社会的各项领域中大放异彩。近年来,随着人造卫星技术的发展,遥感图像的智能化处理受到了愈加广泛的关注。虽然遥感图像的研究在场景分类和目标检测方面取得了显著进展,但是,如何用精确简洁的句子来描述遥感图像的内容仍然是一个很大的问题。代码已开源。本文研究利用精确、灵活的句子描述遥感图像。首先,针对遥感图像的特点,提出了一些有意义的标注方法,以更好地描述遥感图像。其次,为了充分利用遥感图像的内容,构建了一个用于遥感图像描述问题的大规模航空影像数据集。最后,对提出的数据集进行全面的分析,以更

06

智能识别技术 让计算机看懂世界

互联网发展之初受到网络带宽、数据存储等相关技术的限制,信息传播以单模态形式为主,如文字报道、图像相册等。进入大数据时代,信息传播变得丰富多彩,人们从互联网中同时接受图像、视频、文本等不同模态的信息。例如,当我们在互联网上浏览一篇精彩的新闻报道时,不仅可以看到详细的文字描述,还能看到现场拍摄的照片,甚至还有相关的视频报道。这体现了互联网数据从单模态到多模态的转变。 随着互联网多模态数据的出现和传播,“管不住”和“用不好”两大问题也日益突出。“管不住”是指多模态大数据中隐藏着大量涉恐、涉暴等有害信息,极大地

010

NATURE COMMUNICATIONS:大脑白质网络可控性的发育增长支持了脑动力学的多样性

白质在人脑中扮演着极为重要的角色,从神经基础看,白质是支配大脑神经冲动,感受突触刺激的中枢。在中枢神经系统内,组成各种传导束;在周围神经系统内,则集合为分布于全身各组织和器官的脑神经、脊神经和植物性神经。在已有研究中已经发现,白质的发育在人脑发育过程中扮演着极为重要的角色,如人类大脑“小世界属性”中远距离连接的结构基础就是由长距离的白质连接。再如,已有多篇研究发现人类的智力水平与白质发育有关,与智力发育存在显著相关的 N-乙酰-天冬氨酸是少突胶质细胞的代谢产物,而少突胶质细胞正是使神经纤维髓鞘化的细胞。

03

2024 最新综述 | 当知识图谱遇上多模态学习

在该综述中,作者重点分析了近三年(2020-2023)超过300篇文章,聚焦于两个主要方向:一是知识图谱驱动的多模态学习(KG4MM),探讨知识图谱如何支持多模态任务;二是多模态知识图谱(MM4KG),研究如何将知识图谱扩展到多模态知识图谱领域。作者从定义KGs和MMKGs的基本概念入手,继而探讨它们的构建和演化,涵盖知识图谱感知的多模态学习任务(如图像分类、视觉问答)及固有的MMKG构建内部任务(如多模态知识图谱补全、实体对齐)。本文还强调了研究重点,提供了任务定义、评估基准,并概述了基本见解。通过讨论当前面临的挑战和评估新兴研究趋势,如大型语言模型和多模态预训练策略的进展,本调研旨在为KG与多模态学习领域的研究人员提供一个全面的参考框架,以及对该领域不断演进的洞察,从而支持未来的工作。

01

2024 最新综述 | 当知识图谱遇上多模态学习

在该综述中,作者重点分析了近三年(2020-2023)超过300篇文章,聚焦于两个主要方向:一是知识图谱驱动的多模态学习(KG4MM),探讨知识图谱如何支持多模态任务;二是多模态知识图谱(MM4KG),研究如何将知识图谱扩展到多模态知识图谱领域。作者从定义KGs和MMKGs的基本概念入手,继而探讨它们的构建和演化,涵盖知识图谱感知的多模态学习任务(如图像分类、视觉问答)及固有的MMKG构建内部任务(如多模态知识图谱补全、实体对齐)。本文还强调了研究重点,提供了任务定义、评估基准,并概述了基本见解。通过讨论当前面临的挑战和评估新兴研究趋势,如大型语言模型和多模态预训练策略的进展,本调研旨在为KG与多模态学习领域的研究人员提供一个全面的参考框架,以及对该领域不断演进的洞察,从而支持未来的工作。

02

求实求新 | 2018年CCF-腾讯犀牛鸟基金成果分享(二)

在越发重视科技自主创新,新产业国际竞争逐渐激烈的时代,我们更加坚信,科研道路没有捷径可走,只有脚踏实地,一步一个脚印,不断积累方能实现创新。 7年来,犀牛鸟基金为全球范围内的青年学者提供了解产业真实问题、接触业务实际需求的机会,并通过连接青年学者与企业研发团队,开展基础扎实的产学科研合作,推动双方学术视野的拓展及原创应用成果的落地,为科技自主研发的探索和创新储备能量。 2018年CCF-腾讯犀牛鸟基金合作进入收官阶段,小编将分四期介绍全部25个科研基金项目,本期将继续重点介绍《计算机视觉及模式识别》研究

06
领券