HyperAIHyperAI

Command Palette

Search for a command to run...

SwinMTL:一种用于单目相机图像同时深度估计和语义分割的共享架构

Pardis Taghavi; Reza Langari; Gaurav Pandey

摘要

本文介绍了一种创新的多任务学习框架,该框架允许使用单个摄像头同时进行深度估计和语义分割。所提出的方法基于共享的编码器-解码器架构,集成了多种技术以提高深度估计和语义分割任务的准确性,而不牺牲计算效率。此外,论文引入了对抗训练组件,采用了Wasserstein生成对抗网络(WGAN)框架及其判别网络来优化模型的预测结果。该框架在两个数据集上进行了全面评估——室外Cityscapes数据集和室内NYU Depth V2数据集——并在分割和深度估计任务中均超过了现有的最先进方法。我们还进行了消融研究,分析了不同组件的贡献,包括预训练策略、判别网络的引入、对数深度缩放以及高级图像增强技术,以便更好地理解所提出的框架。相关源代码可在以下网址获取:https://github.com/PardisTaghavi/SwinMTL


用 AI 构建 AI

从创意到上线——通过免费 AI 协同编码、开箱即用的环境和最优惠的 GPU 价格,加速您的 AI 开发。

AI 协同编码
开箱即用的 GPU
最优定价

HyperAI Newsletters

订阅我们的最新资讯
我们会在北京时间 每周一的上午九点 向您的邮箱投递本周内的最新更新
邮件发送服务由 MailChimp 提供
SwinMTL:一种用于单目相机图像同时深度估计和语义分割的共享架构 | 论文 | HyperAI超神经