3 个月前

WaterMask:水下图像实例分割

WaterMask:水下图像实例分割

摘要

水下图像实例分割是水下图像分析与理解中的基础且关键步骤。然而,由于缺乏通用的多类别实例分割数据集,水下图像实例分割研究的发展受到了严重制约。本文首次提出了首个水下图像实例分割数据集(UIIS),该数据集包含4628张图像,涵盖7个类别,并提供像素级标注。同时,本文首次设计了WaterMask模型,用于水下图像实例分割任务。在WaterMask中,我们首先提出了差异相似性图注意力模块(Difference Similarity Graph Attention Module, DSGAT),以恢复因图像质量退化和下采样而丢失的细节信息,从而提升网络的预测能力。随后,我们设计了多级特征精炼模块(Multi-level Feature Refinement Module, MFRM),通过不同尺度的特征分别预测前景掩码与边界掩码,并引入边界掩码策略(Boundary Mask Strategy, BMS)结合边界学习损失,引导网络优化,实现更精细的分割结果。大量实验结果表明,相较于Mask R-CNN,在使用ResNet-50和ResNet-101作为主干网络时,WaterMask分别实现了2.9和3.8的mAP提升。代码与数据集已开源,获取地址为:https://github.com/LiamLian0727/WaterMask。

基准测试

基准方法指标
instance-segmentation-on-uiisWaterMask RCNN
Prams(M): 67
mAP: 27.2
instance-segmentation-on-uiisCascade WaterMask R-CNN
Prams(M): 107
mAP: 27.1

用 AI 构建 AI

从想法到上线——通过免费 AI 协同编程、开箱即用的环境和市场最优价格的 GPU 加速您的 AI 开发

AI 协同编程
即用型 GPU
最优价格
立即开始

Hyper Newsletters

订阅我们的最新资讯
我们会在北京时间 每周一的上午九点 向您的邮箱投递本周内的最新更新
邮件发送服务由 MailChimp 提供
WaterMask:水下图像实例分割 | 论文 | HyperAI超神经