3 个月前

GesturePod:面向盲人手杖用户的设备端手势交互实现

GesturePod:面向盲人手杖用户的设备端手势交互实现

摘要

使用盲杖导航的视障人士在同时操作智能手机等设备时面临诸多挑战。基于此前关于专用设备使用中断的研究,我们探索了一种新型的无接触交互模式:视障用户可通过在现有盲杖上执行手势,来触发智能手机上的相应任务。为此,我们提出了GesturePod——一种可便捷集成于任意盲杖上的装置,能够检测用户在使用盲杖时所做出的手势动作。借助GesturePod,用户无需触碰手机,甚至无需将手机从口袋或包中取出,即可完成常见操作。本文探讨了设备开发过程中的技术挑战及设计决策,并提出了一种新颖且高效的机器学习流程,用于训练与部署手势识别模型。实验室环境下的测试结果显示,GesturePod的手势识别准确率高达92%,显著提升了常见智能手机操作的执行效率。野外实地研究进一步表明,GesturePod是一种极具潜力的工具,能够有效改善视障人士在受限户外场景下对智能手机的访问体验。

基准测试

基准方法指标
gesture-recognition-on-gesturepodGesturePod
Real World Accuracy: 92

用 AI 构建 AI

从想法到上线——通过免费 AI 协同编程、开箱即用的环境和市场最优价格的 GPU 加速您的 AI 开发

AI 协同编程
即用型 GPU
最优价格
立即开始

Hyper Newsletters

订阅我们的最新资讯
我们会在北京时间 每周一的上午九点 向您的邮箱投递本周内的最新更新
邮件发送服务由 MailChimp 提供
GesturePod:面向盲人手杖用户的设备端手势交互实现 | 论文 | HyperAI超神经