3 个月前

基于掩码引导的全卷积网络与多尺度标签平滑的协同显著性检测

基于掩码引导的全卷积网络与多尺度标签平滑的协同显著性检测

摘要

在图像共显著性检测问题中,一个关键挑战是如何建模共显著区域在单幅图像内部以及跨所有相关图像之间的共现模式。本文提出了一种分层的图像共显著性检测框架,采用从粗到细的策略以有效捕捉这一模式。首先,我们设计了一种基于掩码引导的全卷积网络结构,用于生成初始的共显著性检测结果。该掩码用于去除背景信息,其由预训练VGG网络高层特征响应图自动学习得到。随后,我们进一步提出一种多尺度标签平滑模型,以进一步优化检测结果。该模型联合优化像素级与超像素级的标签平滑性。在三个主流图像共显著性检测基准数据集(iCoseg、MSRC和Cosal2015)上的实验结果表明,所提方法在性能上显著优于当前最先进的方法。

基准测试

基准方法指标
co-salient-object-detection-on-cocaCSMG
Mean F-measure: 0.390
S-measure: 0.627
max F-measure: 0.499
mean E-measure: 0.606
co-salient-object-detection-on-cosal2015CSMG
MAE: 0.130
S-measure: 0.774
max E-measure: 0.842
max F-measure: 0.784
co-salient-object-detection-on-cosod3kCSMG
MAE: 0.157
S-measure: 0.711
max E-measure: 0.804
max F-measure: 0.709

用 AI 构建 AI

从想法到上线——通过免费 AI 协同编程、开箱即用的环境和市场最优价格的 GPU 加速您的 AI 开发

AI 协同编程
即用型 GPU
最优价格
立即开始

Hyper Newsletters

订阅我们的最新资讯
我们会在北京时间 每周一的上午九点 向您的邮箱投递本周内的最新更新
邮件发送服务由 MailChimp 提供
基于掩码引导的全卷积网络与多尺度标签平滑的协同显著性检测 | 论文 | HyperAI超神经