3 个月前

RBGNet:基于射线的3D目标检测分组方法

RBGNet:基于射线的3D目标检测分组方法

摘要

作为计算机视觉中的基础性问题,3D目标检测正经历快速发展。为从分布不规则且稀疏的点云中提取逐点特征,以往方法通常采用特征分组模块,将点特征聚合至候选目标区域。然而,这些方法尚未充分利用前景目标的表面几何结构来优化特征分组与3D边界框生成。本文提出RBGNet框架,一种基于投票机制的3D目标检测方法,用于实现点云数据上的高精度3D目标检测。为学习更优的目标形状表征,以增强聚类特征并提升3D边界框预测能力,我们设计了一种基于射线的特征分组模块,该模块通过从聚类中心均匀发射的一组确定射线,在物体表面聚合逐点特征。考虑到前景点对边界框估计具有更高语义价值,我们在下采样过程中引入一种新颖的前景偏好采样策略,优先在物体表面采样更多点,从而进一步提升检测性能。实验结果表明,所提模型在ScanNet V2与SUN RGB-D数据集上均达到当前最优的3D检测性能,显著优于现有方法。代码将开源,地址为:https://github.com/Haiyang-W/RBGNet。

代码仓库

haiyang-w/rbgnet
官方
pytorch
GitHub 中提及

基准测试

基准方法指标
3d-object-detection-on-scannetv2RBGNet
mAP@0.25: 70.6
mAP@0.5: 55.2
3d-object-detection-on-sun-rgbd-valRBGNet(Geo only)
mAP@0.25: 64.1
mAP@0.5: 47.2

用 AI 构建 AI

从想法到上线——通过免费 AI 协同编程、开箱即用的环境和市场最优价格的 GPU 加速您的 AI 开发

AI 协同编程
即用型 GPU
最优价格
立即开始

Hyper Newsletters

订阅我们的最新资讯
我们会在北京时间 每周一的上午九点 向您的邮箱投递本周内的最新更新
邮件发送服务由 MailChimp 提供
RBGNet:基于射线的3D目标检测分组方法 | 论文 | HyperAI超神经