3 个月前

逻辑诱导的诊断推理用于半监督语义分割

逻辑诱导的诊断推理用于半监督语义分割

摘要

近年来,半监督语义分割的进展在很大程度上依赖于伪标签技术来弥补标注数据的不足,却忽视了语义概念之间所蕴含的宝贵关系知识。为弥合这一差距,我们提出了一种全新的神经-逻辑半监督学习框架——LogicDiag。其核心思想是:通过符号化知识识别伪标签中的内在矛盾,可作为强大但常被忽视的学习信号。LogicDiag通过基于逻辑诱导诊断的推理机制,有效化解此类矛盾,实现对(可能错误的)伪标签的修复,从而显著缓解长期困扰该领域的错误累积问题。我们在数据密集型的分割场景中展示了LogicDiag的实际应用,将语义概念的结构化抽象形式化为一组逻辑规则。在三个标准的半监督语义分割基准上的大量实验充分验证了LogicDiag的有效性与通用性。此外,本工作凸显了将符号化推理系统性地融入当前主流统计性、神经网络学习方法所蕴含的巨大潜力。

基准测试

基准方法指标
semi-supervised-semantic-segmentation-on-27LogicDiag (DeepLab v3+ with ResNet-101)
Validation mIoU: 73.3
semi-supervised-semantic-segmentation-on-28LogicDiag (DeepLab v3+ with ResNet-101)
Validation mIoU: 76.7
semi-supervised-semantic-segmentation-on-29LogicDiag (DeepLab v3+ with ResNet-101)
Validation mIoU: 77.9
semi-supervised-semantic-segmentation-on-30LogicDiag (DeepLab v3+ with ResNet-101)
Validation mIoU: 79.4
semi-supervised-semantic-segmentation-on-cocoLogicDiag
Validation mIoU: 33.1
semi-supervised-semantic-segmentation-on-coco-1LogicDiag
Validation mIoU: 40.3
semi-supervised-semantic-segmentation-on-coco-2LogicDiag
Validation mIoU: 45.4
semi-supervised-semantic-segmentation-on-coco-3LogicDiag
Validation mIoU: 48.8
semi-supervised-semantic-segmentation-on-coco-4LogicDiag
Validation mIoU: 50.5

用 AI 构建 AI

从想法到上线——通过免费 AI 协同编程、开箱即用的环境和市场最优价格的 GPU 加速您的 AI 开发

AI 协同编程
即用型 GPU
最优价格
立即开始

Hyper Newsletters

订阅我们的最新资讯
我们会在北京时间 每周一的上午九点 向您的邮箱投递本周内的最新更新
邮件发送服务由 MailChimp 提供
逻辑诱导的诊断推理用于半监督语义分割 | 论文 | HyperAI超神经