3 个月前

基于一致性训练的深度引导半监督3D手部姿态估计性能边界探索

基于一致性训练的深度引导半监督3D手部姿态估计性能边界探索

摘要

尽管近年来基于深度信息的三维手部姿态估计方法取得了显著进展,但其仍需大量标注训练数据才能达到高精度。然而,获取此类数据既成本高昂又耗时费力。为应对这一挑战,我们提出一种半监督方法,显著降低对标注数据的依赖。所提方法由两个结构相同的网络协同训练而成:教师网络与学生网络。教师网络利用现有的标注数据与未标注数据进行联合训练,通过一种损失函数设计,促使模型在一组仿射变换下保持估计结果的等变性,从而有效利用未标注样本。学生网络则基于教师网络为未标注样本生成的伪标签进行训练。在测试阶段进行推理时,仅使用学生网络。大量实验表明,该方法在性能上显著优于当前最先进的半监督方法。

基准测试

基准方法指标
hand-pose-estimation-on-icvl-handsTeacher-Student
Average 3D Error: 5.99
hand-pose-estimation-on-msra-handsTeacher-Student
Average 3D Error: 7.18
hand-pose-estimation-on-nyu-handsTeacher-Student
Average 3D Error: 8.01

用 AI 构建 AI

从想法到上线——通过免费 AI 协同编程、开箱即用的环境和市场最优价格的 GPU 加速您的 AI 开发

AI 协同编程
即用型 GPU
最优价格
立即开始

Hyper Newsletters

订阅我们的最新资讯
我们会在北京时间 每周一的上午九点 向您的邮箱投递本周内的最新更新
邮件发送服务由 MailChimp 提供
基于一致性训练的深度引导半监督3D手部姿态估计性能边界探索 | 论文 | HyperAI超神经