3 个月前

室内移动:复杂环境下的无监督视频深度学习

室内移动:复杂环境下的无监督视频深度学习

摘要

近年来,基于视频的无监督深度学习取得了显著进展,在室外场景(如KITTI数据集)中的表现已可与全监督方法相媲美。然而,当直接将该技术应用于室内环境时,仍面临诸多挑战,例如大面积无纹理区域(如白色墙面)、手持相机更复杂的自运动(ego-motion)、透明玻璃以及高反射物体等。为应对上述问题,本文提出一种基于光流的新训练范式,通过提供更清晰的训练目标,降低无监督学习的难度,并有效处理无纹理区域问题。实验评估表明,本方法在NYU Depth V2基准上的性能可与全监督方法相媲美。据我们所知,这是首个在室内数据集上实现的纯无监督学习方法的定量结果报告。

基准测试

基准方法指标
monocular-depth-estimation-on-nyu-depth-v2-4Zhou et al
Absolute relative error (AbsRel): 0.208
Root mean square error (RMSE): 0.712
delta_1: 67.4
delta_2: 90.0
delta_3: 96.8

用 AI 构建 AI

从想法到上线——通过免费 AI 协同编程、开箱即用的环境和市场最优价格的 GPU 加速您的 AI 开发

AI 协同编程
即用型 GPU
最优价格
立即开始

Hyper Newsletters

订阅我们的最新资讯
我们会在北京时间 每周一的上午九点 向您的邮箱投递本周内的最新更新
邮件发送服务由 MailChimp 提供
室内移动:复杂环境下的无监督视频深度学习 | 论文 | HyperAI超神经