人脸对齐--Unconstrained Face Alignment without Face Detection

Unconstrained Face Alignment without Face Detection CVPRW2017

以前人脸对齐主要存在的问题:1)人脸对齐严重依赖于人脸检测来初始化,2)任意姿态的人脸对齐效果不是很好(例如大于45度的 yaw angle) 本文提出一种不需要人脸检测的人脸对齐方法。分两个步骤:1)Basic Landmark Prediction Stage,人脸特征点检测;2)Whole Landmark Regression Stage 基于人脸特征点位置,我们使用一个 Pose Splitting Layer 可以生成人脸的姿态

framework:

2 Our Method 2.1. Basic Landmark Prediction Stage 这里我们首先对图像中每个人脸的5个基础特征点进行检测: two centers of pupils, nose tip, two mouth corners (对照图示) 基础特征点检测方式参考文献【3】中的 a sub-network of landmark heatmap and affinity field prediction

2.1.1 Landmark Heatmap 这一步主要是对单个特征点的预测,基于真值特征点的预测

2.1.2 Landmark Affinity Field 这一步主要是将特征点关联起来用于去除一些噪声

2.1.3 Sub-network Learning

这里我们采用类似VGG网络结构的一个 CNN网络来 jointly learning heatmaps H and affinity fields L of landmarks

2.2. Whole Landmark Regression Stage 2.2.1 Pose Splitting Layer 这里我们将人脸姿态分为三类:left profile, right profile and semi-frontal 这三类姿态划分我们一般使用 Algorithm 1

对于 Menpo Benchmark 只需要分为 left profile and right profile 使用 Algorithm 2

人脸姿态分类完之后,我们对每个姿态的人脸进行姿态归一化

2.2.2 Shape Regression Sub-network 有了姿态归一化之后的人脸,我们进行人脸形状特征点密集提取

300-W dataset

Menpo Benchmark

本文参与腾讯云自媒体分享计划,欢迎正在阅读的你也加入,一起分享。

发表于

我来说两句

0 条评论
登录 后参与评论

相关文章

来自专栏机器之心

学界 | 清华等机构提出基于内部一致性的行人检索方法,实现当前最优

行人检索又叫行人重识别(person re-identification,re-ID),即基于给定行人,从大型数据库中检索特定相关人行道的图像。目前,深度学习方...

880
来自专栏原创

Python与R的争锋:大数据初学者该怎样选?

在当下,人工智能的浪潮席卷而来。从AlphaGo、无人驾驶技术、人脸识别、语音对话,到商城推荐系统,金融业的风控,量化运营、用户洞察、企业征信、智能投顾等,人工...

3859
来自专栏瓜大三哥

视频压缩编码技术(H.264) 之帧内预测

在帧内预测模式中,预测块 P 是基于已编码重建块和当前块形成的。对亮度像素而言,P 块用于4×4 子块或者16×16 宏块的相关操作。4×4 亮度子块有9 种可...

552
来自专栏AI研习社

阿里将 TVM 融入 TensorFlow,在 GPU 上实现全面提速

AI 研习社按,日前,阿里机器翻译团队和 PAI 团队发表博文,阐述将 TVM 引入 TensorFlow,可以带来至少 13 倍的 batch 矩阵相乘(ma...

922
来自专栏企鹅号快讯

对比TensorFlow提升树与XGBoost:我们该使用怎样的梯度提升方法

选自Nicolo Blog 作者:Nicolò Valigi 机器之心编译 参与:蒋思源 几个月前,TensorFlow 发布了梯度提升方法的调用接口,即 Te...

2139
来自专栏祝威廉

如何实现AutoML -- 先Auto每个环节

最近一直在思考如何提高算法工程师效率,并且能让普通工程师也参与进来,毕竟现在来看,招聘到一个合格的算法成本颇高。经过对现实中很多场景的观察,我发现很多情况下算法...

811
来自专栏AI研习社

阿里巴巴 Poster 论文:处理多种退化类型的卷积超分辨率

从学术开发和企业活动上看,阿里巴巴达摩院机器智能技术实验室在雷锋网学术频道 AI 科技评论旗下数据库项目「AI 影响因子」中有不错的表现。实验室分别在 SQuA...

903
来自专栏应用案例

从传统方法到深度学习,人脸关键点检测方法综述

人脸关键点检测是人脸识别和分析领域中的关键一步,它是诸如自动人脸识别、表情分析、三维人脸重建及三维动画等其它人脸相关问题的前提和突破口。近些年来,深度学习方法由...

6568
来自专栏机器之心

研学社•架构组 | CoCoA:大规模机器学习的分布式优化通用框架

机器之心原创 作者:Yanchen Wang 参与:panda 去年,Michael I. Jordan 实验室发表论文《CoCoA: A General Fr...

2626
来自专栏人工智能

如何使用Python基线预测进行时间序列预测

建立基线对于任何时间序列预测问题都是至关重要的。

51910

扫码关注云+社区