4 个月前

KPConvX:通过核注意力机制现代化核点卷积

KPConvX:通过核注意力机制现代化核点卷积

摘要

在深度点云理解领域,KPConv是一种独特的架构,它通过核点(kernel points)在空间中定位卷积权重,而不是依赖多层感知器(MLP)编码。尽管最初取得了成功,但近年来已被采用更新设计和训练策略的MLP网络超越。基于核点原理,我们提出了两种新颖的设计:KPConvD(深度KPConv),一种更轻量的设计,使得使用更深的架构成为可能;以及KPConvX,一种创新设计,通过核注意力值对KPConvD的深度卷积权重进行缩放。利用现代架构和训练策略结合KPConvX,我们在ScanObjectNN、Scannetv2和S3DIS数据集上超越了当前最先进的方法。我们通过消融研究验证了我们的设计选择,并发布了代码和模型。

代码仓库

apple/ml-kpconvx
官方
pytorch
GitHub 中提及

基准测试

基准方法指标
3d-point-cloud-classification-on-scanobjectnnKPConvX-L
Mean Accuracy: 88.1
Overall Accuracy: 89.3
semantic-segmentation-on-s3dis-area5KPConvX-L
mAcc: 78.7
mIoU: 73.5
oAcc: 91.7
semantic-segmentation-on-scannetKPConvX-L
val mIoU: 76.3

用 AI 构建 AI

从想法到上线——通过免费 AI 协同编程、开箱即用的环境和市场最优价格的 GPU 加速您的 AI 开发

AI 协同编程
即用型 GPU
最优价格
立即开始

Hyper Newsletters

订阅我们的最新资讯
我们会在北京时间 每周一的上午九点 向您的邮箱投递本周内的最新更新
邮件发送服务由 MailChimp 提供
KPConvX:通过核注意力机制现代化核点卷积 | 论文 | HyperAI超神经