3 个月前

基于显式分布建模的规则性学习用于骨骼视频异常检测

基于显式分布建模的规则性学习用于骨骼视频异常检测

摘要

在监控视频中进行异常检测对于保障公共安全具有重要意义,同时也面临诸多挑战。与基于像素的异常检测方法不同,基于姿态的方法利用高度结构化的骨骼数据,不仅降低了计算负担,还能有效规避背景噪声的负面影响。然而,与能够直接利用光流等显式运动特征的像素级方法相比,基于姿态的方法缺乏有效的动态表征替代方案。为此,本文提出一种新型运动嵌入器(Motion Embedder, ME),从概率角度为姿态序列提供运动表征。此外,设计了一种面向特定任务的时空Transformer(Spatial-Temporal Transformer, STT),用于实现自监督的姿态序列重建。上述两个模块被整合进一个统一框架中,用于姿态规律性学习,该框架被命名为运动先验规律学习器(Motion Prior Regularity Learner, MoPRL)。在多个具有挑战性的数据集上,MoPRL取得了当前最优的检测性能,平均AUC提升达4.7%。大量实验充分验证了所提各模块的通用性与有效性。

代码仓库

Yui010206/MoPRL
官方
pytorch

基准测试

用 AI 构建 AI

从想法到上线——通过免费 AI 协同编程、开箱即用的环境和市场最优价格的 GPU 加速您的 AI 开发

AI 协同编程
即用型 GPU
最优价格
立即开始

Hyper Newsletters

订阅我们的最新资讯
我们会在北京时间 每周一的上午九点 向您的邮箱投递本周内的最新更新
邮件发送服务由 MailChimp 提供
基于显式分布建模的规则性学习用于骨骼视频异常检测 | 论文 | HyperAI超神经