专栏首页优图实验室的专栏新闻动态|重磅!刷新两项世界纪录的腾讯优图人脸检测算法DSFD开源了!
原创

新闻动态|重磅!刷新两项世界纪录的腾讯优图人脸检测算法DSFD开源了!

近日,知名开源社区Github上有个名为DSFD(Dual Shot Face Detector)的算法引起了业内关注,它正是来自于腾讯优图。目前,该算法已经被计算机视觉顶级会议CVPR 2019接收,并且在2018年10月刷新了两个权威的人脸检测数据集WIDER FACE和FDDB上的新纪录。

Github开源地址:

https://github.com/TencentYoutuResearch/FaceDetection-DSFD

论文公开地址:https://arxiv.org/abs/1810.10220

人脸检测算法是在图像上,检测出人脸的位置(通常以矩形框形式输出),是人脸配准、人脸属性识别、人脸核身、人脸检索等技术的基础。优图此次提出的DSFD人脸检测算法,主要有3点创新:

(1)设计了一种新的“特征增强”模块(FEM:Feature Enhance Module)

FEM在采用Top-Down层间信息融合的同时,在同一“感受野”内做了更多的enhancement。因此在network width and depth上学习到了更有效的context和semantic信息。

(2)提出了“分层锚点渐进”式的代价函数监督(PAL:Progressive Anchor Loss)

模型采用2个层级(hierarchy),基于第一层(low-level)和第二层(high-level)的差异性,适配了不同尺寸的anchor。在训练过程中,PAL对整个模型形成了更有效的监督。

(3)设计了一种“改进的锚点匹配策略”(Improved Anchor Matching Strategy)

One-stage detector由于在输出层分配有密集的anchor,anchor与face匹配的好坏直接影响训练效果,优图的研究员们在data augmentation过程中充分考虑了不同大小的face和各个anchor的关系,提出了一种新的数据扩增方法。

(算法整体流程图)

随着近几年人工智能技术的发展,国内外不少机构、企业都在进行人脸检测的相关研究。腾讯优图的研究员们发现,虽然之前的人脸检测算法大都采用深度学习模型,并在特征学习的过程中也有采用特征金字塔网络(Feature Pyramid Network),但在面对遮挡、暗光、大姿态、小脸等复杂场景时,仍容易出现误检或漏检的情况。因此在FPN基础上,腾讯优图团队采用了3种不同级联方式的空洞卷积(Dilated Convolution),设计了特征增强模块FEM,充分学习到了不同感受野下的人脸特征。

(复杂场景下的人脸检测效果展示)

然而,在新算法探索的过程中,并不是一帆风顺的。这个项目从去年7月中旬启动,进行到第三周,检测效果已经在top5了,但优图的研究员们清楚,到这里还远远不够。在接下来的两个多月里,想要提升效果却越来越难。就好像爬山,前面爬得很快,越到后面,对耐力和决心的要求就越高,腾讯优图高级研究员Casey回忆道:“那段时间,我和其他几位同事实验了很多方案,很多时候是多个方案同时跑,甚至有些方案跑了4-5天后,发现失败了,又得做新的尝试。”失败后,几个研究员就近在工位旁边的玻璃房里,一起分析原因,开始摸索下一套试跑方案。在3个多月的反复“试跑-推翻-试跑”中,最后终于跑出一套大家都满意的算法。不负所望,该算法论文也已被CVPR2019接收。

算法从实验室走出来,不是立马就能直接套用到业务里。事实上,论文里的模型通常比较大,导致实时性不好。在使用时,需结合实际应用情况压缩、裁剪,整体模型会做一定的调整。目前,腾讯优图的人脸检测技术已在安防、金融、社交、交通、零售等多个应用场景落地,并在手机QQ、微众银行、天天P图等多个公司内外部产品上进行应用验证。以安防领域为例,腾讯优图天眼智能安防平台以警务、安防需求为导向,是优图团队面向稽查布控、刑侦办案、社会安防等多场景推出智能化海量人脸检索解决方案。

(腾讯优图天眼智能安防平台)

2017年,腾讯对外开源节奏开始加快,主要覆盖AI、云计算、腾讯游戏、腾讯安全、小程序等相关领域。而腾讯优图的计算机视觉技术的开源更是其中重要的一环。2017年7月,腾讯优图首个AI开源项目NCNN已经正式开源,这是一个为移动端极致优化的高性能神经网络前向的计算框架,是业内首个为移动端优化的开源神经网络推断库。2018年,NCNN宣布正式加入ONNX,截止目前,NCNN的Github star数已接近6000。随着计算机视觉技术的不断开源, AI开发者能更快实现从研究到模型的落地部署,也能更方便地在不同框架间切换,为每项任务选取最优的开发工具。相信随着越来越多的AI机构、企业和个人的算法开源,将驱动整个AI研究更快发展和落地。

原创声明,本文系作者授权云+社区发表,未经许可,不得转载。

如有侵权,请联系 yunjia_community@tencent.com 删除。

我来说两句

0 条评论
登录 后参与评论

相关文章

  • 新闻动态| 腾讯优图的这些黑科技,让营销从此睁开双眼看世界

    一面看似普通的“镜子”,让它看看你的脸,它就知道你该选什么色号的口红,还能在“镜子里”映出你涂了这支口红的样子;对着手机做出手势“暗号”,立即“召唤”出偶像跟你...

    优图实验室
  • 大会活动|“上交会”首日带你直击腾讯优图的科技面貌

    2018年4月19日,第六届中国(上海)国际技术进出口交易会,简称“上交会”,在上海世博展览馆举行。对于这种大型的高科技展览会,当然是少不了腾讯优图的身...

    优图实验室
  • 大会活动|2018北京安博会,腾讯展台现场抢鲜看!

    10月23日,为期4天的2018年中国国际社会公共安全产品博览会(以下简称“安博会”)在北京开幕。本届安博会设有人工智能与国际馆、国际馆、视频监控馆、智能楼宇馆...

    优图实验室
  • 【犀牛鸟·视野】SIGGRAPH Asia 2018:腾讯优图展示人脸识别技术最新应用方案

    ? ★导语★ 2018年12月,SIGGRAPH Asia 2018在日本东京举行。作为亚洲最大的计算机图形和互动技术年度盛会,汇集了来自数字成像、研究、科学...

    腾讯高校合作
  • 重磅!刷新两项世界纪录的腾讯优图人脸检测算法DSFD开源了!

    近日,知名开源社区Github上有个名为DSFD(Dual Shot Face Detector)的算法引起了业内关注,它正是来自于腾讯优图。目前,该算法已经被...

    磐创AI
  • 大会活动|2018北京安博会,腾讯展台现场抢鲜看!

    10月23日,为期4天的2018年中国国际社会公共安全产品博览会(以下简称“安博会”)在北京开幕。本届安博会设有人工智能与国际馆、国际馆、视频监控馆、智能楼宇馆...

    优图实验室
  • 重磅!刷新两项世界纪录的腾讯优图人脸检测算法DSFD开源了!

    近日,知名开源社区Github上有个名为DSFD(Dual Shot Face Detector)的算法引起了业内关注,它正是来自于腾讯优图。目前,该算法已经被...

    代码医生工作室
  • 腾讯优图连夺世界冠军背后:百万级人脸识别达83%,人眼只有23% | 新智元专访

    【新智元导读】腾讯优图是腾讯AI的三大核心支柱之一,与微信AI团队和新成立的腾讯AI Lab共同驱动腾讯的 AI 发展。本年度人脸识别标志性比赛:LFW 和 M...

    新智元
  • 优图动态|优图鉴黄移动端体验上线啦,还不快把私藏图拿出来试试!

    优图小编今天要给大家介绍一个非常高端、非常好玩、非常稀奇、非常不可思议的功能体验——优图智能鉴黄。快关注“腾讯优图”微信公众号(二维码在文章下方),来跟随优图小...

    优图实验室
  • AI+泛娱|优图黑科技:测测你有多性感,压箱底儿的,还不快试试!

    刚刚过去的维密秀上,性感美女云集,一场视觉盛宴,可谓是赚足了大家的眼球。今天小编要介绍一种以腾讯优图黑科技为基础的性感指数测试玩法!!!

    优图实验室

扫码关注云+社区

领取腾讯云代金券