4 个月前

基于多分辨率实例判别的无监督3D形状分析学习

基于多分辨率实例判别的无监督3D形状分析学习

摘要

尽管无监督特征学习在许多领域展示了其减少数据标注和网络设计工作量的优势,现有的无监督3D学习方法仍无法提供一种在各种形状分析任务中性能可与有监督方法相媲美的通用网络。本文提出了一种无监督方法,用于学习一个适用于不同形状分析任务的通用且高效的形状编码网络。该方法的核心思想是从未标注的3D点云中联合编码和学习形状及点特征。为此,我们将HR-Net适应于基于八叉树的卷积神经网络,通过融合多分辨率子网络来联合编码形状和点特征,并设计了一种简单而高效的多分辨率实例判别(MID)损失函数,以实现对形状和点特征的联合学习。我们的网络以3D点云作为输入,输出形状和点特征。训练完成后,该网络可以与简单的特定任务后端层连接,并针对不同的形状分析任务进行微调。我们评估了该方法的有效性和通用性,并通过一系列形状分析任务验证了我们的网络和损失函数设计,包括形状分类、语义形状分割以及形状配准任务。借助简单的后端层,我们的网络在所有无监督方法中表现出最佳性能,并且在小规模标注数据集的任务中达到了与有监督方法相当的性能。特别是在细粒度形状分割任务中,我们的方法甚至大幅超越了现有的有监督方法。

代码仓库

Microsoft/O-CNN
tf
GitHub 中提及

基准测试

基准方法指标
3d-point-cloud-linear-classification-onMID-FC
Overall Accuracy: 90.3
3d-semantic-segmentation-on-partnetMID-Net
mIOU: 60.8

用 AI 构建 AI

从想法到上线——通过免费 AI 协同编程、开箱即用的环境和市场最优价格的 GPU 加速您的 AI 开发

AI 协同编程
即用型 GPU
最优价格
立即开始

Hyper Newsletters

订阅我们的最新资讯
我们会在北京时间 每周一的上午九点 向您的邮箱投递本周内的最新更新
邮件发送服务由 MailChimp 提供
基于多分辨率实例判别的无监督3D形状分析学习 | 论文 | HyperAI超神经