4 个月前

多角度点云-VAE:通过联合自重构和半对半预测实现多角度3D点云的无监督特征学习

多角度点云-VAE:通过联合自重构和半对半预测实现多角度3D点云的无监督特征学习

摘要

无监督点云特征学习对于大规模点云理解至关重要。近期基于深度学习的方法依赖于通过自重构来学习全局几何结构。然而,这些方法在局部几何结构的学习上仍存在不足,这极大地限制了所学特征的区分能力。为了解决这一问题,我们提出了MAP-VAE,该模型通过联合利用全局和局部自监督来实现全局和局部几何结构的学习。为了实现有效的局部自监督,我们引入了点云的多角度分析方法。在多角度场景中,我们首先从每个角度将点云分为前半部分和后半部分,然后训练MAP-VAE学习从前半部分序列预测对应的后半部分序列。MAP-VAE通过RNN执行这种半对半预测,同时学习每个局部几何结构及其之间的空间关系。此外,MAP-VAE还通过自重构来学习全局几何结构,在此过程中我们采用了变分约束以促进新形状的生成。四个形状分析任务中的优异结果表明,与现有最先进方法相比,MAP-VAE能够学习到更具区分性的全局或局部特征。

基准测试

基准方法指标
3d-point-cloud-linear-classification-onMAE-VAE
Overall Accuracy: 88.4

用 AI 构建 AI

从想法到上线——通过免费 AI 协同编程、开箱即用的环境和市场最优价格的 GPU 加速您的 AI 开发

AI 协同编程
即用型 GPU
最优价格
立即开始

Hyper Newsletters

订阅我们的最新资讯
我们会在北京时间 每周一的上午九点 向您的邮箱投递本周内的最新更新
邮件发送服务由 MailChimp 提供
多角度点云-VAE:通过联合自重构和半对半预测实现多角度3D点云的无监督特征学习 | 论文 | HyperAI超神经