3 个月前

点变换器

点变换器

摘要

自注意力网络已彻底革新了自然语言处理领域,并在图像分析任务(如图像分类和目标检测)中取得了令人瞩目的进展。受此成功的启发,我们探索了自注意力网络在三维点云处理中的应用。为此,我们设计了适用于点云的自注意力模块,并基于这些模块构建了用于语义场景分割、物体部件分割以及物体分类等任务的自注意力网络。我们的Point Transformer架构在多个领域和任务上均优于先前的方法。例如,在大规模语义场景分割的挑战性数据集S3DIS上,Point Transformer在Area 5测试集上取得了70.4%的mIoU(平均交并比),相比最强的先前模型提升了3.3个百分点,并首次突破了70%的mIoU阈值。

基准测试

基准方法指标
3d-part-segmentation-on-shapenet-partPointTransformer
Class Average IoU: 83.7
Instance Average IoU: 86.6
3d-point-cloud-classification-on-modelnet40PointTransformer
Mean Accuracy: 90.6
Overall Accuracy: 93.7
3d-semantic-segmentation-on-s3disPointTransformer
mIoU (6-Fold): 73.5
mIoU (Area-5): 70.4
3d-semantic-segmentation-on-stpls3dPoint transformer
mIOU: 47.64
point-cloud-segmentation-on-pointcloud-cPointTransformers
mean Corruption Error (mCE): 1.049
semantic-segmentation-on-s3disPointCNN
Mean IoU: 65.4
Number of params: N/A
semantic-segmentation-on-s3disSPGraph
Mean IoU: 62.1
Number of params: N/A
semantic-segmentation-on-s3disPointTransformer
Mean IoU: 73.5
Number of params: 7.8M
Params (M): 7.8
mAcc: 81.9
oAcc: 90.2
semantic-segmentation-on-s3disPointNet
Mean IoU: 47.6
Number of params: N/A
semantic-segmentation-on-s3disKPConv
Mean IoU: 70.6
Number of params: 14.1M
Params (M): 14.1
semantic-segmentation-on-s3dis-area5PointNet
Number of params: N/A
mIoU: 41.1
semantic-segmentation-on-s3dis-area5PointCNN
Number of params: N/A
mIoU: 57.3
semantic-segmentation-on-s3dis-area5PointTransformer
Number of params: 7.8M
mAcc: 76.5
mIoU: 70.4
oAcc: 90.8

用 AI 构建 AI

从想法到上线——通过免费 AI 协同编程、开箱即用的环境和市场最优价格的 GPU 加速您的 AI 开发

AI 协同编程
即用型 GPU
最优价格
立即开始

Hyper Newsletters

订阅我们的最新资讯
我们会在北京时间 每周一的上午九点 向您的邮箱投递本周内的最新更新
邮件发送服务由 MailChimp 提供
点变换器 | 论文 | HyperAI超神经