4 个月前

深入探索更多:用于3D异常检测的内部空间模态感知

深入探索更多:用于3D异常检测的内部空间模态感知

摘要

三维异常检测最近已成为计算机视觉领域的重要研究焦点。一些先进的方法已经实现了令人满意的异常检测性能。然而,这些方法通常主要关注三维样本的外部结构,难以充分利用样本内部的信息。基于“为什么不从内部寻找更多信息”的基本直觉,我们提出了一种名为内部空间模态感知(Internal Spatial Modality Perception, ISMP)的简单方法,以全面探索从内部视图中提取的特征表示。具体而言,我们提出的ISMP包含一个关键的感知模块——空间洞察引擎(Spatial Insight Engine, SIE),该模块将点云的复杂内部信息抽象为基本的全局特征。此外,为了更好地将结构信息与点数据对齐,我们提出了一种增强的关键点特征提取模块,用于放大空间结构特征表示。同时,引入了一个新颖的特征过滤模块,以减少噪声和冗余特征,进一步精确对齐空间结构。大量的实验验证了我们所提出方法的有效性,在Real3D-AD基准测试中分别实现了对象级和像素级AUROC(Area Under Receiver Operating Characteristic Curve)提升3.2%和13.1%。值得注意的是,SIE的强大泛化能力已通过理论证明,并在分类和分割任务中得到了验证。

代码仓库

M-3LAB/Look-Inside-for-More
官方
pytorch
GitHub 中提及

基准测试

基准方法指标
3d-anomaly-detection-on-real-3d-adISMP
Object AUROC: 0.767

用 AI 构建 AI

从想法到上线——通过免费 AI 协同编程、开箱即用的环境和市场最优价格的 GPU 加速您的 AI 开发

AI 协同编程
即用型 GPU
最优价格
立即开始

Hyper Newsletters

订阅我们的最新资讯
我们会在北京时间 每周一的上午九点 向您的邮箱投递本周内的最新更新
邮件发送服务由 MailChimp 提供
深入探索更多:用于3D异常检测的内部空间模态感知 | 论文 | HyperAI超神经