首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往
您找到你想要的搜索结果了吗?
是的
没有找到

一文让你了解AI产品的测试 评价人工智能算法模型的几个重要指标

如何测试人工智能产品越来越受到广大测试工程师的关注,由于人工智能的测试预言(Test Oracle)不是像普通软件产品那么明确,到目前为止,基于大数据的第四代人工智能产品的测试,主要集中在“对大数据测试”“白盒测试”“基于样本分析算法的优劣”以及“对最终产品的验收测试”。“对大数据测试”主要针对数据阶段验证、对数据计算验证和对输出阶段验证;“白盒测试”主要考虑神经元覆盖(Neuron Coverage)、阈值覆盖率(Threshold Coverage)、符号变更率(Sign Change Coverage)、值变更覆盖率(Value Change Coverage)、符号-符号覆盖率(Sign-SignCoverage)和层覆盖(LayerCoverage)这六个指标;“对最终产品的验收测试”可以采用对传统软件验收测试的方法,基于业务来进行测试,比如对于人脸识别系统,是否可以在各个人脸角度变化,光线等条件下正确识别人脸。本文重点讨论的是“基于样本分析算法的优劣”。

02

静息态fMRI+图论+机器学习实现阿尔兹海默症的高准确度诊断

阿尔兹海默症AD是痴呆中最为普遍的病症,约占痴呆病例的60-80%。AD的病理性标志是Aβ蛋白的沉积。近些年来,利用静息态fMRI对AD发病机制和影响标志物的研究发现AD患者许多脑区之间的功能连接如默认网络DMN出现异常。此外,图论方法可以通过计算全局和局部参数来表征脑网络的不同方面。这里,笔者为大家分享一篇发表在Clinical Neurophysiology杂志上的题目为《Identifying patients with Alzheimer’s disease using resting-state fMRI and graph theory》的研究论文,该论文利用静息态fMRI构建脑网络,计算脑网络的图论参数,以图论参数作为特征值,结合机器学习实现AD的100%准确率分类诊断。

00

联合使用EEG电极和溯源空间特征实现精神分裂症的机器学习诊断

传统的精神分裂症(SZ)诊断往往采用问卷调查的方式进行,医生会依据一定的标准(如DSM-5)询问患者一系列问题,以此来判定患者是否符合SZ的标准。但是这种传统的诊断方式往往具有一定的主观性,如患者可能会隐藏或可以回避一些问题,使得诊断出现一定的偏差。因此,研究者一直致力于寻找客观、定量的方法来实现SZ的分类和诊断。研究者采用EEG/ERP技术发现,SZ患者在某些任务中的ERP成分、功能连接或某些频段的振荡活动等都会出现异常。一些研究者尝试把上述EEG的标志物与机器学习结合起来,实现SZ的诊断和分类。比如说,有研究者利用Oddball任务诱发的ERP成分的幅值作为特征值,实现了SZ高达79%的诊断正确率。但是,上述这些研究都是利用电极水平(sensor-level)的特征来进行分类,而利用溯源水平(source-level)特征来对SZ进行机器学习诊断的研究似乎还很少。本次,笔者在这里分享一篇题目为《Machine-learning-based diagnosis of schizophrenia using combined sensor-level and source-level EEG features》的研究论文,该论文发表于Schizophrenia Research杂志,其联合使用EEG电极和溯源空间特征实现精神分裂症的机器学习诊断。 材料与方法 1.被试。从医院募集34个SZ患者和34个健康人,被试的临床资料如表1所示。

00

IJCAI Oral:弱监督实现精确目标检测,上交大提出协同学习框架

---- 新智元专栏 作者:上海交通大学未来媒体网络协同创新中心 【新智元导读】训练一个高准确率的检测模型需要大量精细标注的图片数据,其成本很高。本文提出了一种弱监督协同学习框架,仅使用粗略标签的图片训练目标检测模型,测试结果显示其定位精确率和检测准确率均显著优于目前最先进的方法。 目标检测是机器视觉的基本问题,在视频监控、无人驾驶等场景都有广泛应用。随着深度学习的兴起,近年来涌现了大量优秀的目标检测模型。然而,训练一个高准确率的检测模型需要大量的以包围框形式精细标注的图片数据作为模型监督条件,需要

01

温度对压力差压变送器精确度的影响

压力差压变送器的制造技术不断发展,产品的精确度已由上世纪六十年代的1%、0.5%提高到上世纪七八十年代的0.25%,在上世纪九十年代提高到0.1%、0.075%,近年来又提高到0.05%、0.025%。这个精确度指标通常是由变送器的制造厂商提供的,有的制造厂商称其为“参考精度”,原因在于这个精确度指标通常是在试验室恒温、恒湿及标准大气压条件下得到的,而在用户的实际生产现场,往往离试验室条件相差甚远,变送器的精确度是很难达到的,所以称为其“参考精度”可能更为合适。“参考精度”在实际使用时多半要打折扣,这个折扣有多大?怎么样才能不打或少打折扣?这是用户关心的。

02
领券