3 个月前

针对常见畸变的3D点云识别鲁棒性基准测试

针对常见畸变的3D点云识别鲁棒性基准测试

摘要

三维点云数据上的深度神经网络已在现实世界中得到广泛应用,尤其是在安全关键型应用场景中。然而,现有研究对这些模型在面对数据退化(corruptions)时的鲁棒性关注仍显不足。本文提出了ModelNet40-C,这是首个针对三维点云数据退化鲁棒性的综合性基准测试,包含15种常见且具有现实意义的退化类型。我们的评估结果显示,当前最先进的(SOTA)模型在ModelNet40与ModelNet40-C上的性能之间存在显著差距。为缩小这一差距,我们在系统评估了多种数据增强与测试时自适应策略后,提出了一种简单而有效的方法:将PointCutMix-R与TENT相结合。该方法在不显著增加计算开销的前提下,显著提升了模型在退化条件下的泛化能力。此外,我们总结出若干对未来点云识别中退化鲁棒性研究具有指导意义的关键洞见。例如,我们发现:在采用合适训练策略的前提下,基于Transformer的架构能够实现最强的鲁棒性表现。我们希望本研究的深入分析能够推动三维点云领域中更鲁棒的训练策略或网络架构设计的发展。本文所涉及的代码库与数据集已公开,详见:https://github.com/jiachens/ModelNet40-C。

代码仓库

jiachens/ModelNet40-C
官方
pytorch
GitHub 中提及
dogyoonlee/RSMix-official
tf
GitHub 中提及
tiangexiang/CurveNet
pytorch
GitHub 中提及
hamidreza-dastmalchi/3dd-tta
pytorch
GitHub 中提及
RF5/CurveNet
pytorch
GitHub 中提及
dogyoonlee/RSMix
tf
GitHub 中提及

基准测试

基准方法指标
3d-point-cloud-classification-on-modelnet40-cPCT+PointCutMix-R
Error Rate: 0.163

用 AI 构建 AI

从想法到上线——通过免费 AI 协同编程、开箱即用的环境和市场最优价格的 GPU 加速您的 AI 开发

AI 协同编程
即用型 GPU
最优价格
立即开始

Hyper Newsletters

订阅我们的最新资讯
我们会在北京时间 每周一的上午九点 向您的邮箱投递本周内的最新更新
邮件发送服务由 MailChimp 提供
针对常见畸变的3D点云识别鲁棒性基准测试 | 论文 | HyperAI超神经