3 个月前

共识与记忆协同:一种用于城市场景异常分割的简单方法

共识与记忆协同:一种用于城市场景异常分割的简单方法

摘要

异常分割是自动驾驶等安全关键应用中的关键任务,其目标是在训练过程中未见过的类别(即分布外,Out-of-Distribution, OOD)物体进行检测。该任务的核心挑战在于如何区分难以处理的分布内(in-distribution)样本与分布外样本,而这一问题尚未得到充分探讨。本文提出一种新颖且简洁的方法——共识协同记忆(Consensus Synergizes with Memory, CosMe),受心理学研究启发:群体在记忆任务中的表现优于个体。该方法的核心思想包括:1)构建一个记忆库,其中包含从预训练分割模型多个层级提取的已见类别原型;2)训练一个辅助模型以模仿预训练模型的行为,并通过测量两者中间层特征的一致性,作为与记忆库协同互补的判别线索。实验结果表明,CosMe在多个城市场景异常分割数据集上显著优于现有方法,展现出优异的区分硬样本分布内与分布外样本的能力。

基准测试

基准方法指标
anomaly-detection-on-fishyscapes-l-fCosMe
AP: 41.95
FPR95: 13.32

用 AI 构建 AI

从想法到上线——通过免费 AI 协同编程、开箱即用的环境和市场最优价格的 GPU 加速您的 AI 开发

AI 协同编程
即用型 GPU
最优价格
立即开始

Hyper Newsletters

订阅我们的最新资讯
我们会在北京时间 每周一的上午九点 向您的邮箱投递本周内的最新更新
邮件发送服务由 MailChimp 提供
共识与记忆协同:一种用于城市场景异常分割的简单方法 | 论文 | HyperAI超神经