3 个月前

快速且准确:面向人脸对齐的结构一致性组件

快速且准确:面向人脸对齐的结构一致性组件

摘要

本文提出了一种快速且精确的面部对齐坐标回归方法。与大多数现有面部关键点回归方法通常采用全连接层将特征图转换为关键点坐标不同,本文引入了一个结构一致性组件,显式地考虑了面部关键点之间的相互关系。由于人脸具有特定的几何结构,不同面部区域之间的结构一致性为精确定位关键点提供了重要线索。然而,全连接层中的密集连接过度利用了这种一致性,导致关键线索在众多连接中难以被有效区分。相比之下,本文提出的结构一致性组件采用动态稀疏图结构,仅在最具相关性的关键点之间传递特征,从而更有效地保留关键信息。此外,我们设计了一种新型损失函数——Soft Wing损失,以进一步提升定位精度。在WFLW、COFW和300W三个主流基准数据集上的大量实验表明,所提方法在保持快速推理速度的同时,取得了当前最优的性能表现。尤其在挑战性场景下,该方法展现出极强的鲁棒性,在COFW和WFLW数据集上分别实现了0%和2.88%的极低失败率。

基准测试

基准方法指标
face-alignment-on-300wSCC
NME_inter-ocular (%, Challenge): 4.93
NME_inter-ocular (%, Common): 2.88
NME_inter-ocular (%, Full): 3.28
face-alignment-on-cofwSCC
NME (inter-ocular): 3.63%
face-alignment-on-wflwSCC
AUC@10 (inter-ocular): 56.66
FR@10 (inter-ocular): 2.88
NME (inter-ocular): 4.4

用 AI 构建 AI

从想法到上线——通过免费 AI 协同编程、开箱即用的环境和市场最优价格的 GPU 加速您的 AI 开发

AI 协同编程
即用型 GPU
最优价格
立即开始

Hyper Newsletters

订阅我们的最新资讯
我们会在北京时间 每周一的上午九点 向您的邮箱投递本周内的最新更新
邮件发送服务由 MailChimp 提供
快速且准确:面向人脸对齐的结构一致性组件 | 论文 | HyperAI超神经