4 个月前

DeCaFA:用于野生环境下面部对齐的深度卷积级联

DeCaFA:用于野生环境下面部对齐的深度卷积级联

摘要

面部对齐是一个活跃的计算机视觉领域,其目标是在不同的数据集中定位多个面部特征点。当前最先进的面部对齐方法要么采用端到端回归,要么通过从初始估计开始逐步细化形状。在本文中,我们介绍了一种名为DeCaFA(Deep Convolutional Cascade Architecture for Face Alignment)的端到端深度卷积级联架构用于面部对齐。DeCaFA利用全卷积阶段在整个级联过程中保持完整的空间分辨率。在每个级联阶段之间,DeCaFA使用带有空间softmax的多个串联传输层来为每个特征点对齐任务生成特征点级别的注意力图。加权中间监督以及各阶段之间的高效特征融合使得DeCaFA能够以端到端的方式逐步优化这些注意力图。实验结果表明,DeCaFA在300W、CelebA和WFLW数据库上的表现显著优于现有方法。此外,我们还展示了DeCaFA可以从少量图像中学习精细对齐,并且使用粗略标注的数据也能达到合理的精度。

基准测试

基准方法指标
face-alignment-on-300wDeCaFA
NME_inter-ocular (%, Challenge): 5.26
NME_inter-ocular (%, Common): 2.93
NME_inter-ocular (%, Full): 3.39
face-alignment-on-wflwDeCaFA
AUC@10 (inter-ocular): 56.3
FR@10 (inter-ocular): 4.84
NME (inter-ocular): 4.62

用 AI 构建 AI

从想法到上线——通过免费 AI 协同编程、开箱即用的环境和市场最优价格的 GPU 加速您的 AI 开发

AI 协同编程
即用型 GPU
最优价格
立即开始

Hyper Newsletters

订阅我们的最新资讯
我们会在北京时间 每周一的上午九点 向您的邮箱投递本周内的最新更新
邮件发送服务由 MailChimp 提供
DeCaFA:用于野生环境下面部对齐的深度卷积级联 | 论文 | HyperAI超神经