4 个月前

PoseRAC:用于重复动作计数的姿态显著性变换器

PoseRAC:用于重复动作计数的姿态显著性变换器

摘要

本文在重复动作计数领域做出了重要贡献,通过引入一种称为姿态显著性表示(Pose Saliency Representation)的新方法。该方法仅使用两个显著姿态而非冗余帧来高效表示每个动作,从而显著降低了计算成本并提高了性能。此外,我们提出了一种基于此表示的姿态级方法——PoseRAC,该方法利用姿态显著性注释(Pose Saliency Annotation)对训练数据中的显著姿态进行标注,在两个新版本的数据集上达到了最先进的性能。我们的轻量级模型具有极高的效率,仅需20分钟即可在GPU上完成训练,并且推理速度比以往的方法快近10倍。此外,我们的方法在OBO指标上取得了显著的改进,达到了0.56,而之前的最先进方法TransRAC仅为0.29。代码和新数据集已发布在https://github.com/MiracleDance/PoseRAC,供进一步研究和实验使用,使我们的提出的 方法对研究社区高度可访问。

代码仓库

miracledance/poserac
官方
pytorch
GitHub 中提及

基准测试

基准方法指标
repetitive-action-counting-on-repcountPoseRAC
OBO: 0.560

用 AI 构建 AI

从想法到上线——通过免费 AI 协同编程、开箱即用的环境和市场最优价格的 GPU 加速您的 AI 开发

AI 协同编程
即用型 GPU
最优价格
立即开始

Hyper Newsletters

订阅我们的最新资讯
我们会在北京时间 每周一的上午九点 向您的邮箱投递本周内的最新更新
邮件发送服务由 MailChimp 提供
PoseRAC:用于重复动作计数的姿态显著性变换器 | 论文 | HyperAI超神经