4 个月前

学习用于语义分割的判别特征网络

学习用于语义分割的判别特征网络

摘要

大多数现有的语义分割方法仍然面临两个方面的挑战:类内不一致性(intra-class inconsistency)和类间不可区分性(inter-class indistinction)。为了解决这两个问题,我们提出了一种判别特征网络(Discriminative Feature Network, DFN),该网络包含两个子网络:平滑网络(Smooth Network)和边界网络(Border Network)。具体而言,为了应对类内不一致性问题,我们特别设计了一个平滑网络,该网络采用了通道注意力模块(Channel Attention Block)和全局平均池化(global average pooling),以选择更具判别性的特征。此外,我们还提出了一种边界网络,通过深度语义边界监督(deep semantic boundary supervision)使边界两侧的特征更加可区分。基于我们提出的DFN,在PASCAL VOC 2012数据集上实现了86.2%的平均交并比(mean IOU),在Cityscapes数据集上实现了80.3%的平均交并比。

代码仓库

ycszen/TorchSeg
pytorch
GitHub 中提及
YuhuiMa/DFN-tensorflow
tf
GitHub 中提及
akinoriosamura/TorchSeg-mirror
pytorch
GitHub 中提及

基准测试

基准方法指标
semantic-segmentation-on-cityscapesDFN (ResNet-101)
Mean IoU (class): 79.3%
semantic-segmentation-on-cityscapesSmooth Network with Channel Attention Block
Mean IoU (class): 80.3%
semantic-segmentation-on-pascal-voc-2012Smooth Network with Channel Attention Block
Mean IoU: 86.2%
semantic-segmentation-on-pascal-voc-2012DFN (ResNet-101)
Mean IoU: 82.7%
semantic-segmentation-on-pascal-voc-2012-valDFN (ResNet-101)
mIoU: 80.60%

用 AI 构建 AI

从想法到上线——通过免费 AI 协同编程、开箱即用的环境和市场最优价格的 GPU 加速您的 AI 开发

AI 协同编程
即用型 GPU
最优价格
立即开始

Hyper Newsletters

订阅我们的最新资讯
我们会在北京时间 每周一的上午九点 向您的邮箱投递本周内的最新更新
邮件发送服务由 MailChimp 提供
学习用于语义分割的判别特征网络 | 论文 | HyperAI超神经