3 个月前

6D旋转表示用于无约束头部姿态估计

6D旋转表示用于无约束头部姿态估计

摘要

本文提出了一种无需约束条件的端到端头部姿态估计方法。为解决旋转标签模糊性问题,我们采用旋转矩阵形式表示真实标签数据,并提出一种连续的6D旋转矩阵表示方法,实现高效且鲁棒的直接回归。该方法能够学习完整的旋转外观信息,与以往方法仅将姿态预测限制在窄角度范围以获得良好结果的做法形成鲜明对比。此外,我们设计了一种基于测地距离的损失函数,使网络在SO(3)流形几何结构上得到更合理的优化。在公开数据集AFLW2000和BIWI上的实验结果表明,所提方法相较于其他先进方法性能提升高达20%。我们已开源训练与测试代码及预训练模型,详见:https://github.com/thohemp/6DRepNet。

代码仓库

thohemp/6drepnet
官方
pytorch
GitHub 中提及

基准测试

基准方法指标
head-pose-estimation-on-aflw20006DRepNet
MAE: 3.97
head-pose-estimation-on-biwi6DRepNet
MAE (trained with BIWI data): 2.66
MAE (trained with other data): 3.47
head-pose-estimation-on-panoptic6DRepNet
Geodesic Error (GE): 8.08

用 AI 构建 AI

从想法到上线——通过免费 AI 协同编程、开箱即用的环境和市场最优价格的 GPU 加速您的 AI 开发

AI 协同编程
即用型 GPU
最优价格
立即开始

Hyper Newsletters

订阅我们的最新资讯
我们会在北京时间 每周一的上午九点 向您的邮箱投递本周内的最新更新
邮件发送服务由 MailChimp 提供
6D旋转表示用于无约束头部姿态估计 | 论文 | HyperAI超神经