专栏首页周景超的专栏腾讯 AI Lab 计算机视觉中心人脸 & OCR团队近期成果介绍(3)
原创

腾讯 AI Lab 计算机视觉中心人脸 & OCR团队近期成果介绍(3)

上一期中介绍了我们团队部分已公开的国际领先的研究成果,近期我们有些新的成果和大家进一步分享。

1 人脸进展

人脸是最重要的视觉信息之一。以貌识人、以貌取人是人的本性,也是最自然、最常用的身份确认和交互方式之一。互联网和移动互联网上每天上传和传播的天文数字级别的照片中有很大一部分都是和人脸相关的(比如国际知名互联网公司Facebook每天都有亿级以上的海量人脸照片和视频上传),因此人脸检测与识别技术在学术界和工业界都备受关注,是各种国际前沿视觉技术的重要检验场之一。

在上一期中已介绍了我们团队在人脸检测与人脸识别上所取得的世界领先的原创性成果,迄今为止,我们团队在人脸检测的国际最权威评测平台WIDER FACE的所有三个测试子集、人脸识别的国际最权威评测平台Megaface Challenge 2(不同于Megaface Challenge 1,Megaface Challenge 2严格限定参赛者使用官方提供的固定的训练数据以公平地对比不同人脸算法的性能)的所有测试任务中都取得世界第一的性能。众所周知,原创性技术和落地应用这二者是密切相关、相辅相成的,一方面,原创性技术需要在落地应用场景中检验其有效性并帮助解决工业界的实际需求。另一方面,工业界的很多实际需求是之前长期存在但是在技术层面长期解决不了的,对这些技术难题如果没有真正创新性的技术突破也就难以真正解决。

就应用进展而言,我们团队自主研发的人脸技术已经接入公司的若干重要场景下的应用业务。其中一个是TEG信安业务场景,目的是精准识别海量上传图像中的敏感人物,针对带有敏感人物的图片或视频进行拦截。该项目的难点在于待识别的敏感人物会以各种形式出现在图片当中,比如漫画和处理过的照片都是比较难的情况。我们采用自主研发的人脸识别模型对该问题进行了建模,同时利用TEG信安提供的业务数据对业务场景进行了优化。

我们的人脸技术接入的另一个重要业务是MIG互联网+合作事业部政企项目组的腾讯慧眼项目。腾讯慧眼项目主要针对政务和生活场景,通过人脸验证完成自动化的身份鉴别,方便百姓远程办事,让数据多跑路,百姓少跑腿,为百姓带来更多“刷脸”办政务的创新场景。在政务场景下的人证比对中,我们的人脸技术在内测的业务数据上已达到甚至超过了知名人脸公司依图科技(与商汤科技、旷世科技齐名的人脸巨头公司)的精度。目前该项目正在进展中,并将在近期开放至腾讯慧眼项目的开放平台上。

此外,我们的人脸技术还广泛应用在了内部团队其他视觉相关项目中。例如在我们的图像数据分类项目中,人脸检测技术用于辅助半自动的标注任务。在AI Lab自研的AI有嘻哈项目中,人脸技术也将被用于识别图片中的名人脸,以便进一步的提高图片配文的质量。

2 OCR进展

2.1 ICDAR竞赛

在上一期中介绍了我们团队在OCR的ICDAR Robust Reading竞赛中所取得的佳绩。该竞赛有两个很重要的竞争很激烈的场景:互联网图片场景图像(Born-Digital Images)和对焦自然场景文本图像(Focused Scene Text Images)。我们在这两个场景的文本定位任务(Task 1: Text Localization)和单词识别任务(Task 3: Word Recognition),一共四个任务上都取得第一名的佳绩。一般对每个场景的Robust Reading竞赛,传统上分成四个任务:文本定位、文本分割(Text Segmentation)、单词识别、和端到端识别(End to End)。在传统OCR时代,识别图片中的文本必然经过检测、分割和识别三个阶段。在深度学习时代,近年来由于RNN的出现,对于检测到的单词可以直接训练网络做识别,分割这个任务已没有太大意义,成为鸡肋,也没有团队参加这项任务,ICDAR 2017年公布的新的竞赛数据集,如:COCO-Text,直接取消了这项任务。

近期我们向OCR的ICDAR Robust Reading竞赛的最终目标(端到端识别,即采用端到端的方法识别图片中的文本)发起冲击,并取得突破,在上述两大重要场景的端到端识别上也都获得第一名。值得一提的是,迄今为止我们在这OCR的两大重要场景上都实现了大满贯,超过了该领域的众多强劲对手(百度、阿里、商汤、旷世科技、和各大高校),囊括了所有的6项冠军(忽略已经被淘汰的分割任务)。

就技术手段而言,我们基于在该领域的深厚技术底蕴(人脸与OCR的很多底层技术是相通的)以及在参加文本定位和单词识别任务中所积累的国际领先技术,进一步采用了级联训练(Cascade Training)的方法,把文本定位网络和单词识别网络集成起来,使得结果可以正向流动、反馈可以逆向传播。凭借着这种方法,我们在互联网图片和对焦自然场景文本图片这两个重要场景的端到端任务上都获得第一名的佳绩,截图如下所示。

相关链接:http://rrc.cvc.uab.es/?ch=1&com=evaluation&task=4

图2. 互联网图片端到端任务上的排名

互联网图片端到端任务部分结果如下图所示,详细结果可在网站上查询:http://rrc.cvc.uab.es/?ch=1&com=evaluation&view=method_samples&task=4&m=31774>v=1

图3. 互联网图片端到端任务的部分结果

相关链接:http://rrc.cvc.uab.es/?ch=2&com=evaluation&task=4

图4. 对焦自然场景文本图片端到端任务上的排名

对焦自然场景文本图像端到端任务部分结果如下图所示,详细结果可在网站上查询:http://rrc.cvc.uab.es/?ch=2&com=evaluation&view=method_samples&task=4&m=31791>v=1

图5. 对焦自然场景文本图片端到端任务的部分结果

3 小结

人脸&OCR团队一直以来按照“夯实基础,做既有创新性又能落地应用的国际前沿工作”这个研究思路开展和推进工作,迄今为止我们不仅在人脸与OCR的多项国际权威榜单名列榜首,而且我们的技术在公司的多个重要的场景中得到了很好的应用。近期,我们团队参与的“AI在腾讯信息安全中的应用”项目获得了2017年下半年技术突破奖银奖,截图如下。

在2017腾讯全球合作伙伴大会上,AI Lab计算机视觉中心负责人刘威博士也向公司的合作伙伴和行业精英介绍了我们团队在人脸与OCR上的若干研究成果,如下图所示:

人脸&OCR团队将继续以踏实、进取的态度做好研究工作和项目落地,不忘初心,继续为人脸与OCR的技术发展贡献自己的力量。

原创声明,本文系作者授权云+社区发表,未经许可,不得转载。

如有侵权,请联系 yunjia_community@tencent.com 删除。

我来说两句

0 条评论
登录 后参与评论

相关文章

  • 腾讯 AI Lab 计算机视觉中心人脸 & OCR 团队近期成果介绍 ( 2 )

    近期,我们团队在人脸识别的关键任务上也取得突破,在人脸识别的国际权威评测平台(Megaface Challenge)中取得了国际领先的成果。同时,在人脸检测中,...

    周景超
  • 腾讯 AI Lab 计算机视觉中心人脸 & OCR 团队近期成果介绍(1)

    腾讯 AI Lab 计算机视觉中心人脸&OCR; 团队专注于领域内国际前沿技术研究与应用,近期取得部分成果,这里和大家分享一下。

    周景超
  • 22篇入选,15 篇 CVPR 2020 精选论文详解

    近日,计算机视觉领域“奥斯卡”CVPR 2020官方公布论文收录结果,伴随投稿数量激增,接收率开始经历了一个持续下降的过程。今年,在6656篇有效投稿中,共有1...

    AI科技评论
  • 人脸识别案例:接口返回“图片中没有人脸”

    腾讯云人脸识别产品基于腾讯优图强大的面部分析技术,提供包括人脸检测与分析、五官定位、人脸搜索、人脸比对、人脸验证、人员查重、静态活体检测等多种功能,主要以公有云...

    周朋伟
  • 【资料 】20大数据可视化工具及资料

    巴西的新闻网站Visualoop,这是一家汇集来自互联网的信息图表和数据为中心的可视化网站,今年,他们继续评选出这一年最优秀的大数据可视化相关工具。 “我们很艰...

    小莹莹
  • 人脸识别中的活体检测算法综述

    判断捕捉到的人脸是真实人脸,还是伪造的人脸攻击(如:彩色纸张打印人脸图,电子设备屏幕中的人脸数字图像 以及 面具 等)

    小白学视觉
  • 私人订制Android本地图片选择器

    史上最强的安卓图片选择器——GalleryFinal; 简书博客地址——http://www.jianshu.com/p/48ddd6756b7a

    代码咖啡
  • 级联人脸检测--A Convolutional Neural Network Cascade for Face Detection

    A Convolutional Neural Network Cascade for Face Detection CVPR2015 https://git...

    用户1148525
  • 深度学习之视频人脸识别系列(一):简介

    磐创AI
  • Milvus 实战|生物多因子认证系列 (二):人脸识别

    视觉 AI 作为一个已经发展成熟的技术领域,具有丰富的应用场景和商业化价值,全球 40% 的 AI 企业都集中在视觉 AI 领域。近年来,视觉 AI 除了在智能...

    ZILLIZ

扫码关注云+社区

领取腾讯云代金券