3 个月前

PAConv:基于动态核组装的点云位置自适应卷积

PAConv:基于动态核组装的点云位置自适应卷积

摘要

我们提出了一种通用的三维点云处理卷积操作——位置自适应卷积(Position Adaptive Convolution, PAConv)。PAConv的核心思想是通过动态组合存储在权重库(Weight Bank)中的基础权重矩阵来构建卷积核,其中这些权重矩阵的系数由ScoreNet从点的位置中自适应地学习得到。这种方式使卷积核的构建具有数据驱动的特性,从而赋予PAConv相较于二维卷积更强的灵活性,能够更有效地处理不规则且无序的点云数据。此外,通过组合预存的权重矩阵而非直接从点位置粗暴预测卷积核,显著降低了学习过程的复杂度。与现有点卷积算子通常依赖高度工程化的网络结构不同,我们将在不改变原有网络配置的前提下,将PAConv集成到经典的基于多层感知机(MLP)的点云处理流程中。即使在结构简单的网络基础上,本方法仍能达到甚至超越当前最先进模型的性能,在分类与分割任务上均显著提升基线模型的表现,同时保持良好的计算效率。为深入理解PAConv的机制,本文提供了详尽的消融实验与可视化分析。相关代码已开源至:https://github.com/CVMI-Lab/PAConv。

代码仓库

CVMI-Lab/PAConv
官方
pytorch
GitHub 中提及

基准测试

基准方法指标
3d-point-cloud-classification-on-intraPAConv
F1 score (5-fold): 0.906
3d-point-cloud-classification-on-modelnet40PAConv
Overall Accuracy: 93.9
point-cloud-classification-on-pointcloud-cPAConv
mean Corruption Error (mCE): 1.104
point-cloud-segmentation-on-pointcloud-cPAConv
mean Corruption Error (mCE): 0.927

用 AI 构建 AI

从想法到上线——通过免费 AI 协同编程、开箱即用的环境和市场最优价格的 GPU 加速您的 AI 开发

AI 协同编程
即用型 GPU
最优价格
立即开始

Hyper Newsletters

订阅我们的最新资讯
我们会在北京时间 每周一的上午九点 向您的邮箱投递本周内的最新更新
邮件发送服务由 MailChimp 提供
PAConv:基于动态核组装的点云位置自适应卷积 | 论文 | HyperAI超神经