4 个月前

GeoTransformer:快速且鲁棒的点云配准几何变换器

GeoTransformer:快速且鲁棒的点云配准几何变换器

摘要

我们研究了点云配准中提取精确对应点的问题。近期的一些无关键点方法通过绕过重复关键点的检测,展示了巨大的潜力,尤其是在重叠度较低的情况下,这种检测尤为困难。这些方法在降采样的超点上寻找对应关系,然后将这些对应关系传播到密集点上。超点的匹配基于其邻域补丁是否重叠。这种稀疏且松散的匹配需要上下文特征来捕捉点云的几何结构。为此,我们提出了几何变换器(Geometric Transformer),简称GeoTransformer,用于学习鲁棒的超点匹配几何特征。该模型编码了成对距离和三元组角度,使其对刚性变换具有不变性,并在低重叠情况下表现出鲁棒性。这种简洁的设计达到了令人惊讶的高匹配精度,使得在估计对齐变换时无需使用RANSAC算法,从而实现了100倍的加速。我们在涵盖室内、室外、合成、多视图和非刚性场景的丰富基准数据集上进行了广泛的实验,验证了GeoTransformer的有效性。特别是在具有挑战性的3DLoMatch基准数据集上,我们的方法将内点比例提高了18~31个百分点,并将配准召回率提高了超过7个百分点。我们的代码和模型可在以下网址获取:\url{https://github.com/qinzheng93/GeoTransformer}。

代码仓库

基准测试

基准方法指标
point-cloud-registration-on-eth-trained-onGeoTransformer
Recall (30cm, 5 degrees): 4.91
point-cloud-registration-on-fp-o-eGeoTransformer
RRE (degrees): 2.30
RTE (cm): 1.57
Recall (3cm, 10 degrees): 63.94
point-cloud-registration-on-fp-o-hGeoTransformer
RRE (degrees): 2.57
RTE (cm): 2.22
Recall (3cm, 10 degrees): 2.64
point-cloud-registration-on-fp-o-mGeoTransformer
RRE (degrees): 2.45
RTE (cm): 1.94
Recall (3cm, 10 degrees): 22.07
point-cloud-registration-on-fp-r-eGeoTransformer
RRE (degrees): 2.29
RTE (cm): 1.57
Recall (3cm, 10 degrees): 64.12
point-cloud-registration-on-fp-r-hGeoTransformer
RRE (degrees): 0.47
RTE (cm): 1.69
Recall (3cm, 10 degrees): 47.75
point-cloud-registration-on-fp-r-mGeoTransformer
RRE (degrees): 2.26
RTE (cm): 1.63
Recall (3cm, 10 degrees): 55.93
point-cloud-registration-on-fp-t-eGeoTransformer
RRE (degrees): 2.32
RTE (cm): 1.59
Recall (3cm, 10 degrees): 66.25
point-cloud-registration-on-fp-t-hGeoTransformer
RRE (degrees): 2.27
RTE (cm): 1.57
Recall (3cm, 10 degrees): 64.18
point-cloud-registration-on-fp-t-mGeoTransformer
RRE (degrees): 2.29
RTE (cm): 1.58
Recall (3cm, 10 degrees): 64.29
point-cloud-registration-on-kitti-trained-onGeoTransformer
Success Rate: 67.93
point-cloud-registration-on-rotkittiGeoTransformer
RR@(1,0.1): 50.1
RR@(1.5,0.3): 78.5

用 AI 构建 AI

从想法到上线——通过免费 AI 协同编程、开箱即用的环境和市场最优价格的 GPU 加速您的 AI 开发

AI 协同编程
即用型 GPU
最优价格
立即开始

Hyper Newsletters

订阅我们的最新资讯
我们会在北京时间 每周一的上午九点 向您的邮箱投递本周内的最新更新
邮件发送服务由 MailChimp 提供
GeoTransformer:快速且鲁棒的点云配准几何变换器 | 论文 | HyperAI超神经