3 个月前

重新审视人脸对齐中的量化误差

重新审视人脸对齐中的量化误差

摘要

近年来,热图回归模型已成为面部关键点定位的主流方法。为降低计算成本并减少内存占用,整个流程通常涉及从原始图像到输出热图的下采样操作。然而,下采样引入的量化误差会对定位精度造成多大影响?这一问题在以往的研究中几乎未得到系统性探讨。本文首次对这一问题进行了定量分析,填补了该领域的研究空白。统计结果表明,由量化误差导致的归一化均方误差(NME)甚至超过当前最先进方法(SOTA)的三分之一,这已成为面部对齐技术实现新突破的重大障碍。为缓解量化效应带来的负面影响,本文提出一种新颖的方法——“热图中的热图”(Heatmap In Heatmap, HIH),该方法采用两类热图作为标签表示,以编码关键点坐标。在HIH框架中,某一类热图的取值范围对应另一类热图的单个像素。此外,我们还将面部对齐任务与其他领域解决方案相结合,进行对比分析。在多个基准数据集上的大量实验验证了HIH方法的可行性,并展现出优于现有方法的性能表现。尤其在WFLW数据集上,平均误差降至4.18,显著超越当前最先进水平。

基准测试

基准方法指标
face-alignment-on-cofwHIH w. MSE(2 stack)
NME (inter-ocular): 3.28%
face-alignment-on-wflwHIH w. MSE(2-stack)
AUC@10 (inter-ocular): 59.7
FR@10 (inter-ocular): 2.84
NME (inter-ocular): 4.18

用 AI 构建 AI

从想法到上线——通过免费 AI 协同编程、开箱即用的环境和市场最优价格的 GPU 加速您的 AI 开发

AI 协同编程
即用型 GPU
最优价格
立即开始

Hyper Newsletters

订阅我们的最新资讯
我们会在北京时间 每周一的上午九点 向您的邮箱投递本周内的最新更新
邮件发送服务由 MailChimp 提供
重新审视人脸对齐中的量化误差 | 论文 | HyperAI超神经