4 个月前

RobustLoc:在具有挑战性的驾驶环境中实现稳健的相机姿态回归

RobustLoc:在具有挑战性的驾驶环境中实现稳健的相机姿态回归

摘要

相机重定位在自动驾驶领域有多种应用。以往的相机姿态回归模型仅考虑环境干扰较小的理想场景。为了应对可能因季节变化、天气、光照以及不稳定物体存在而变得复杂的驾驶环境,我们提出了一种名为RobustLoc的方法,该方法通过神经微分方程获得了对干扰的鲁棒性。我们的模型使用卷积神经网络从多视角图像中提取特征图,采用鲁棒神经微分方程扩散模块进行信息的交互扩散,并通过多层训练的分支姿态解码器来估计车辆的姿态。实验结果表明,RobustLoc超越了当前最先进的相机姿态回归模型,并在各种环境中表现出强大的性能。我们的代码已发布在:https://github.com/sijieaaa/RobustLoc

代码仓库

sijieaaa/robustloc
官方
pytorch

基准测试

基准方法指标
camera-absolute-pose-regression-on-4seasonsRobustLoc
Mean Translation/Rotation Error (m/degree): 4.28 / 2.04
camera-absolute-pose-regression-on-4seasons-1RobustLoc
Mean Translation/Rotation Error (m/degree): 1.36 / 0.83
camera-absolute-pose-regression-on-4seasons-2RobustLoc
Mean Translation/Rotation Error (m/degree): 21.65 / 2.41
camera-absolute-pose-regression-on-oxfordRobustLoc
Mean Translation/Rotation Error (m/degree): 4.68 / 2.67
Median Translation/Rotation Error (m/degree): 3.70 / 1.50
camera-absolute-pose-regression-on-oxford-1RobustLoc
Mean Translation/Rotation Error (m/degree): 2.49 / 1.40
Median Translation/Rotation Error (m/degree): 1.97 / 0.84
camera-absolute-pose-regression-on-oxford-2RobustLoc
Mean Translation/Rotation Error (m/degree): 9.37 / 2.47
Median Translation/Rotation Error (m/degree): 5.93 / 1.06
camera-localization-on-oxford-robotcar-fullRobustLoc
Mean Rotation Error: 2.47
Mean Translation Error: 9.37
visual-localization-on-oxford-robotcar-fullRobustLoc
Mean Translation Error: 9.37

用 AI 构建 AI

从想法到上线——通过免费 AI 协同编程、开箱即用的环境和市场最优价格的 GPU 加速您的 AI 开发

AI 协同编程
即用型 GPU
最优价格
立即开始

Hyper Newsletters

订阅我们的最新资讯
我们会在北京时间 每周一的上午九点 向您的邮箱投递本周内的最新更新
邮件发送服务由 MailChimp 提供
RobustLoc:在具有挑战性的驾驶环境中实现稳健的相机姿态回归 | 论文 | HyperAI超神经