
摘要
语义图像分割的域适应非常必要,因为手动标注具有像素级标签的大数据集既昂贵又耗时。现有的域适应技术要么仅适用于有限的数据集,要么在性能上不如监督学习。本文提出了一种新颖的双向学习框架,用于分割任务的域适应。通过双向学习,图像翻译模型和分割适应模型可以交替学习并相互促进。此外,我们还提出了一种自监督学习算法,以学习更好的分割适应模型,并反过来改进图像翻译模型。实验结果表明,我们的方法在分割任务的域适应方面显著优于现有最先进方法。源代码可在 https://github.com/liyunsheng13/BDL 获取。
代码仓库
liyunsheng13/BDL
官方
pytorch
GitHub 中提及
Sudhir11292rt/myBDL
pytorch
GitHub 中提及
asbjrnmunk/mdd-unet
pytorch
GitHub 中提及
基准测试
| 基准 | 方法 | 指标 |
|---|---|---|
| image-to-image-translation-on-gtav-to | Bidirectional Learning | mIoU: 41.3 |
| image-to-image-translation-on-synthia-to | Bidirectional Learning (ResNet-101) | mIoU (13 classes): 51.4 |
| semantic-segmentation-on-dada-seg | BDL | mIoU: 29.66 |
| synthetic-to-real-translation-on-gtav-to | BDL | mIoU: 48.5 |