人脸对齐--Unconstrained Face Alignment without Face Detection

Unconstrained Face Alignment without Face Detection CVPRW2017

以前人脸对齐主要存在的问题:1)人脸对齐严重依赖于人脸检测来初始化,2)任意姿态的人脸对齐效果不是很好(例如大于45度的 yaw angle) 本文提出一种不需要人脸检测的人脸对齐方法。分两个步骤:1)Basic Landmark Prediction Stage,人脸特征点检测;2)Whole Landmark Regression Stage 基于人脸特征点位置,我们使用一个 Pose Splitting Layer 可以生成人脸的姿态

framework:

2 Our Method 2.1. Basic Landmark Prediction Stage 这里我们首先对图像中每个人脸的5个基础特征点进行检测: two centers of pupils, nose tip, two mouth corners (对照图示) 基础特征点检测方式参考文献【3】中的 a sub-network of landmark heatmap and affinity field prediction

2.1.1 Landmark Heatmap 这一步主要是对单个特征点的预测,基于真值特征点的预测

2.1.2 Landmark Affinity Field 这一步主要是将特征点关联起来用于去除一些噪声

2.1.3 Sub-network Learning

这里我们采用类似VGG网络结构的一个 CNN网络来 jointly learning heatmaps H and affinity fields L of landmarks

2.2. Whole Landmark Regression Stage 2.2.1 Pose Splitting Layer 这里我们将人脸姿态分为三类:left profile, right profile and semi-frontal 这三类姿态划分我们一般使用 Algorithm 1

对于 Menpo Benchmark 只需要分为 left profile and right profile 使用 Algorithm 2

人脸姿态分类完之后,我们对每个姿态的人脸进行姿态归一化

2.2.2 Shape Regression Sub-network 有了姿态归一化之后的人脸,我们进行人脸形状特征点密集提取

300-W dataset

Menpo Benchmark

本文参与腾讯云自媒体分享计划,欢迎正在阅读的你也加入,一起分享。

发表于

我来说两句

0 条评论
登录 后参与评论

相关文章

来自专栏AI科技大本营的专栏

一文掌握常用的机器学习模型(文末福利)

AI 科技大本营按:本文节选自微软亚洲研究院机器学习研究团队刘铁岩、陈薇、王太峰、高飞合著的《分布式机器学习:算法、理论与实践》一书。为了让大家更好地理解分布式...

942
来自专栏数据派THU

独家 | 一文为你解析神经网络(附实例、公式)

原文标题:Introduction To Neural Networks 作者:Ben Gorman 翻译:申利彬 校对:和中华 本文长度为4000字,建议阅读...

2305
来自专栏AI传送门

吊炸天的CNNs,这是我见过最详尽的图解!(下)

3186
来自专栏GAN&CV

四大经典卷积网络介绍

原标题:独家 |《TensorFlow实战》作者黄文坚:四大经典CNN网络技术原理

1291
来自专栏智能算法

基础聚类算法:K-means算法

一、算法简介: 俗话说:“物以类聚,人以群分”,聚类算法不同于分类算法,对于一个 分类器 ,通常需要你告诉它“这个东西被分为某某类”这样一些例子,理想情况下,一...

5415
来自专栏PPV课数据科学社区

【V课堂】R语言十八讲(十六)—广义线性模型

所谓广义线性模型,顾名思义就是一般狭义线性模型的推广,那我们先看看我们一般的狭义线性模型,这在第十讲也说过可以参看http://www.ppvke.com/Bl...

3439
来自专栏张俊红

朴素贝叶斯详解

总第78篇 一、统计知识 01|随机事件: 1、概念 随机事件是在随机试验中,可能出现也可能不出现,而在大量重复试验中具有某种规律性的事件叫做随机事件(简称事件...

2976
来自专栏机器学习算法工程师

七夕节最好的礼物:生成对抗网络的tensorflow实现

原文地址:http://blog.evjang.com/2016/06/generative-adversarial-nets-in.html

1305
来自专栏目标检测和深度学习

Google发布机器学习术语表 (包括简体中文)

Google 工程教育团队已经发布了多语种的 Google 机器学习术语表,该术语表中列出了一般的机器学习术语和 TensorFlow 专用术语的定义。语言版本...

2816
来自专栏CVer

[计算机视觉论文速递] 2018-02-28

[1]《CSRNet: Dilated Convolutional Neural Networks for Understanding the Highly C...

4458

扫码关注云+社区