4 个月前

基于关键帧提取和特征融合的快速鲁棒动态手势识别

基于关键帧提取和特征融合的快速鲁棒动态手势识别

摘要

手势识别是计算机视觉和模式识别领域的热门话题,在自然的人机界面中发挥着至关重要的作用。尽管近年来取得了显著进展,但快速且鲁棒的手势识别仍然是一个开放问题,因为现有的方法尚未同时很好地平衡性能和效率。为了解决这一问题,本研究结合图像熵和密度聚类技术,从手部动作视频中提取关键帧以进行进一步的特征提取,从而提高识别效率。此外,还提出了一种特征融合策略,以进一步提升特征表示能力,进而提高识别性能。为了在“野外”环境中验证我们的方法,我们还引入了两个新的数据集,分别称为HandGesture(手部动作)和Action3D(三维动作)数据集。实验结果一致表明,我们的策略在西北大学、剑桥大学、HandGesture 和 Action3D 手势数据集上均取得了具有竞争力的结果。我们的代码和数据集将在 https://github.com/Ha0Tang/HandGestureRecognition 上发布。

代码仓库

Ha0Tang/HandGestureRecognition
官方
GitHub 中提及

基准测试

基准方法指标
hand-gesture-recognition-on-cambridgeKey Frames + Feature Fusion
Accuracy: 98.23%
hand-gesture-recognition-on-northwesternKey Frames + Feature Fusion
Accuracy: 96.89

用 AI 构建 AI

从想法到上线——通过免费 AI 协同编程、开箱即用的环境和市场最优价格的 GPU 加速您的 AI 开发

AI 协同编程
即用型 GPU
最优价格
立即开始

Hyper Newsletters

订阅我们的最新资讯
我们会在北京时间 每周一的上午九点 向您的邮箱投递本周内的最新更新
邮件发送服务由 MailChimp 提供
基于关键帧提取和特征融合的快速鲁棒动态手势识别 | 论文 | HyperAI超神经