美图行为识别论文入选ECCV2018

欧洲计算机视觉国际会议ECCV 2018将于9月8日在德国慕尼黑拉开帷幕，ECCV 与每年一届的CVPR、两年一届的ICCV并称计算机视觉领域的三大国际顶会。据悉，今年ECCV共收到3000+篇论文投稿，其中入选论文779篇，录取率约为24%。

美图云视觉技术部门与中科院自动化所共同提出一种基于交互感知的时空金字塔注意力机制神经网络的行为分类算法，基于该算法思想的相关论文“Interaction-aware Spatio-temporal Pyramid Attention Networks for Action Classification”已被ECCV2018收录。届时美图云视觉技术部门将赴一线交流，助力计算机视觉的工业落地。

以往注意机制模型通过加权所有局部特征计算和提取关键特征，忽略了各局部特征间的强相关性，特征间存在较强的信息冗余。为解决此问题，来自美图云视觉技术部门和中科院自动化所的研发人员借鉴 PCA（主成分分析）思想，提出了一种引入局部特征交互感知的自注意机制模型，并将模型嵌入到 CNN 网络中，提出一个端到端的网络结构。该算法在多个学术数据集和美图公司内部工业界视频数据集上的行为分类表现都非常出色。

据了解，美图云视觉技术部门专注图像、视频、文本等多媒体信息的内容分析和理解技术研发和算法平台构建。团队主导研发的智能视觉分析平台DeepNet和大规模多媒体数据检索平台DeepHash，为美图各产品和业务，如美图秀秀，美拍、商业化广告业务、推荐业务、搜索业务、安全审核业务等提供图像视频内容理解和检索技术基础设施。