3 个月前

端到端学习用于3D点云的局部多视角描述子

端到端学习用于3D点云的局部多视角描述子

摘要

在本工作中,我们提出了一种端到端框架,用于学习三维点云的局部多视角描述子。现有方法为实现类似的多视角表示,通常在预处理阶段采用手工设计的视角进行渲染,该过程与后续的描述子学习阶段相互分离。而在我们的框架中,通过引入可微分渲染器,将多视角渲染过程整合进神经网络,使视角参数成为可优化的变量,从而能够捕捉兴趣点更具信息量的局部上下文。为进一步获得具有判别性的描述子,我们还设计了一种软视角池化模块,用于有选择性地融合多视角下的卷积特征。在现有三维点云配准基准数据集上的大量实验表明,所提方法在定量和定性两个方面均优于现有的局部描述子。

代码仓库

craigleili/3DLocalMultiViewDesc
pytorch
GitHub 中提及

基准测试

基准方法指标
point-cloud-registration-on-3dmatch-benchmarkLMVD
Feature Matching Recall: 97.5
point-cloud-registration-on-eth-trained-onLMVD
Feature Matching Recall: 0.616

用 AI 构建 AI

从想法到上线——通过免费 AI 协同编程、开箱即用的环境和市场最优价格的 GPU 加速您的 AI 开发

AI 协同编程
即用型 GPU
最优价格
立即开始

Hyper Newsletters

订阅我们的最新资讯
我们会在北京时间 每周一的上午九点 向您的邮箱投递本周内的最新更新
邮件发送服务由 MailChimp 提供
端到端学习用于3D点云的局部多视角描述子 | 论文 | HyperAI超神经