3 个月前

基于对比学习的单传感器活动识别虚拟融合

基于对比学习的单传感器活动识别虚拟融合

摘要

人体活动识别(Human Activity Recognition, HAR)可采用多种类型的传感器,各类传感器各具优势与局限。单一传感器往往难以从其自身视角全面捕捉用户的运动信息,从而导致识别错误。尽管传感器融合技术可通过整合多源数据提升HAR性能,但其本身存在诸多固有缺陷,如用户隐私泄露风险、设备部署与维护成本高、系统复杂度大等问题。为应对上述挑战,本文提出一种名为“虚拟融合”(Virtual Fusion)的新方法:该方法在训练阶段利用多个时间同步传感器的未标注数据,而在推理阶段仅需使用单个传感器即可完成识别任务。通过引入对比学习(contrastive learning)机制,有效挖掘不同传感器之间的内在关联性。实验结果表明,虚拟融合方法在识别准确率上显著优于仅使用单一传感器的训练方式,且在某些场景下,其性能甚至超越了实际融合多个传感器的测试表现。此外,本文进一步将该方法推广为更具通用性的“虚拟融合中的实际融合”(Actual Fusion within Virtual Fusion, AFVF),在推理阶段可灵活选择部分训练阶段使用的传感器子集进行融合。所提方法在UCI-HAR与PAMAP2两个标准基准数据集上均取得了当前最优的识别准确率与F1分数。代码实现可应需求提供。

基准测试

基准方法指标
human-activity-recognition-on-harAFVF
Accuracy: 0.9861
Macro-F1: 0.9865
human-activity-recognition-on-pamap2AFVF
Accuracy: 0.9672
Macro F1: 0.9665

用 AI 构建 AI

从想法到上线——通过免费 AI 协同编程、开箱即用的环境和市场最优价格的 GPU 加速您的 AI 开发

AI 协同编程
即用型 GPU
最优价格
立即开始

Hyper Newsletters

订阅我们的最新资讯
我们会在北京时间 每周一的上午九点 向您的邮箱投递本周内的最新更新
邮件发送服务由 MailChimp 提供
基于对比学习的单传感器活动识别虚拟融合 | 论文 | HyperAI超神经