摘要

零样本检测（ZSD）是一项具有挑战性的任务，其目标是在模型未接受过某些目标类别（“未见”类别）的视觉样本训练的情况下，同时识别和定位物体。最近，采用生成模型如生成对抗网络（GANs）的方法展示了一些最佳的结果，这些方法通过在已见类别数据上训练的GAN根据语义生成未见类别的样本，从而使普通的物体检测器能够识别未见物体。然而，语义混淆的问题仍然存在，即模型有时无法区分语义相似的类别。在这项工作中，我们提出了一种结合三元组损失的生成模型训练方法，该方法考虑了类别之间的差异程度，并将其反映在生成的样本中。此外，还施加了循环一致性损失，以确保生成的某一类别的视觉样本与其自身的语义高度对应。在两个基准ZSD数据集——MSCOCO和PASCAL-VOC上的广泛实验表明，与现有的ZSD方法相比，该方法显著提高了性能，减少了语义混淆并改善了对未见类别的检测效果。