4 个月前

重新审视单幅图像深度估计:迈向更高分辨率且具有准确物体边界的深度图

重新审视单幅图像深度估计:迈向更高分辨率且具有准确物体边界的深度图

摘要

本文研究了单图像深度估计问题。近年来,卷积神经网络(CNNs)的应用在该领域的研究中带来了显著的进步。然而,大多数现有方法在估计的深度图中存在空间分辨率损失的问题;一个典型的症状是物体边界重建失真和模糊。为了实现更高精度的估计,特别是提高深度图的空间分辨率,本文提出了对现有方法的两项改进。一项改进涉及不同尺度特征融合的策略,为此我们提出了一种改进的网络架构,包含四个模块:编码器、解码器、多尺度特征融合模块和精炼模块。另一项改进则针对用于训练过程中测量推理误差的损失函数。我们展示了三个损失项——分别衡量深度、梯度和表面法线的误差——以互补的方式提高了精度。实验结果表明,这两项改进使得本方法在当前最先进方法的基础上实现了更高的精度,例如在小物体和物体边界处提供了更精细的分辨率重建。

代码仓库

Xt-Chen/SARPN
pytorch
GitHub 中提及
Seojiyoung/Depth-Map-Estimation
pytorch
GitHub 中提及

基准测试

基准方法指标
monocular-depth-estimation-on-nyu-depth-v2SENet-154
RMSE: 0.530

用 AI 构建 AI

从想法到上线——通过免费 AI 协同编程、开箱即用的环境和市场最优价格的 GPU 加速您的 AI 开发

AI 协同编程
即用型 GPU
最优价格
立即开始

Hyper Newsletters

订阅我们的最新资讯
我们会在北京时间 每周一的上午九点 向您的邮箱投递本周内的最新更新
邮件发送服务由 MailChimp 提供
重新审视单幅图像深度估计:迈向更高分辨率且具有准确物体边界的深度图 | 论文 | HyperAI超神经