17 天前

RefineNet:用于高分辨率语义分割的多路径精炼网络

RefineNet:用于高分辨率语义分割的多路径精炼网络

摘要

近年来,超深卷积神经网络(CNN)在目标识别任务中表现出色,同时也成为语义分割等密集分类问题的首选方法。然而,深度CNN中反复进行的下采样操作(如池化或卷积步长)会导致原始图像分辨率显著下降。为此,本文提出RefineNet——一种通用的多路径精炼网络,该网络显式利用下采样过程中所有可用信息,通过长程残差连接实现高分辨率预测。在此架构下,能够捕捉高层语义特征的深层网络可直接借助早期卷积层提取的细粒度特征进行精炼。RefineNet的各个组件均采用遵循恒等映射思想的残差连接,从而支持高效的端到端训练。此外,我们引入了链式残差池化(chained residual pooling)机制,能够以高效的方式捕捉丰富的背景上下文信息。我们在七个公开数据集上进行了全面实验,取得了新的最先进性能。特别地,在具有挑战性的PASCAL VOC 2012数据集上,我们获得了83.4的交并比(IoU)得分,为目前报道的最优结果。

基准测试

基准方法指标
semantic-segmentation-on-ade20kRefineNet
Validation mIoU: 40.7
semantic-segmentation-on-ade20k-valRefineNet (ResNet-152)
mIoU: 40.70
semantic-segmentation-on-ade20k-valRefineNet (ResNet-101)
mIoU: 40.20
semantic-segmentation-on-cityscapesRefineNet (ResNet-101)
Mean IoU (class): 73.6%
semantic-segmentation-on-coco-stuff-testRefineNet (ResNet-101)
mIoU: 33.6%
semantic-segmentation-on-nyu-depth-v2RefineNet (ResNet-101)
Mean IoU: 46.5%
semantic-segmentation-on-pascal-contextRefineNet
mIoU: 47.3
semantic-segmentation-on-pascal-voc-2012Multipath-RefineNet
Mean IoU: 84.2%
semantic-segmentation-on-trans10kRefineNet
GFLOPs: 44.56
mIoU: 58.18%

用 AI 构建 AI

从想法到上线——通过免费 AI 协同编程、开箱即用的环境和市场最优价格的 GPU 加速您的 AI 开发

AI 协同编程
即用型 GPU
最优价格
立即开始

Hyper Newsletters

订阅我们的最新资讯
我们会在北京时间 每周一的上午九点 向您的邮箱投递本周内的最新更新
邮件发送服务由 MailChimp 提供
RefineNet:用于高分辨率语义分割的多路径精炼网络 | 论文 | HyperAI超神经