摘要

无监督语义分割旨在通过识别图像语料库中的全局语义类别，自动将图像划分为具有语义意义的区域，而无需任何形式的注释。基于近期在自监督表示学习方面的进展，我们重点关注如何利用这些大型预训练模型来完成下游的无监督分割任务。我们提出了PriMaPs（Principal Mask Proposals）——根据图像的特征表示将其分解为具有语义意义的掩码。这使得我们可以通过使用随机期望最大化算法（PriMaPs-EM）将类原型拟合到PriMaPs，从而实现无监督语义分割。尽管其概念简单，但PriMaPs-EM在各种预训练骨干模型（包括DINO和DINOv2）以及不同数据集（如Cityscapes、COCO-Stuff和Potsdam-3）上均取得了有竞争力的结果。重要的是，当PriMaPs-EM正交应用于当前最先进的无监督语义分割流水线时，能够显著提升结果。代码可在https://github.com/visinf/primaps 获取。