4 个月前

仅使用RGB模态的换衣行人重识别

仅使用RGB模态的换衣行人重识别

摘要

解决换衣人物再识别(re-id)的关键在于提取与衣物无关的特征,例如面部、发型、体型和步态。目前大多数研究主要集中在从多模态信息(如轮廓和素描)中建模体型,但未能充分利用原始RGB图像中的与衣物无关的信息。本文提出了一种基于衣物的对抗损失(Clothes-based Adversarial Loss, CAL),通过惩罚re-id模型对衣物的预测能力来从原始RGB图像中挖掘与衣物无关的特征。大量实验表明,仅使用RGB图像,CAL在广泛使用的换衣人物再识别基准上超越了所有现有方法。此外,与静态图像相比,视频包含更丰富的外观信息和额外的时间信息,可以用于建模适当的时空模式以辅助换衣再识别。由于目前没有公开可用的换衣视频再识别数据集,我们贡献了一个新的数据集,命名为CCVID,并展示了在建模时空信息方面存在很大的改进空间。代码和新数据集可在以下链接获取:https://github.com/guxinqian/Simple-CCReID。

代码仓库

guxinqian/simple-ccreid
官方
pytorch
GitHub 中提及

基准测试

基准方法指标
multiview-gait-recognition-on-casia-bCAL (RGB), AP3DNLResNet50
Accuracy (Cross-View, Avg): 97.3
BG#1-2: 99.8
CL#1-2: 92.3
NM#5-6 : 99.9
person-re-identification-on-ccvidCAL
Rank-1: 81.7
mAP: 79.6
person-re-identification-on-ltccCAL
Rank-1: 40.1
mAP: 18.0
person-re-identification-on-prccCAL
Rank-1: 55.2
mAP: 55.8
person-re-identification-on-vc-clothesCAL
Rank-1: 85.8
mAP: 79.8

用 AI 构建 AI

从想法到上线——通过免费 AI 协同编程、开箱即用的环境和市场最优价格的 GPU 加速您的 AI 开发

AI 协同编程
即用型 GPU
最优价格
立即开始

Hyper Newsletters

订阅我们的最新资讯
我们会在北京时间 每周一的上午九点 向您的邮箱投递本周内的最新更新
邮件发送服务由 MailChimp 提供
仅使用RGB模态的换衣行人重识别 | 论文 | HyperAI超神经