4 个月前

基于单张图像的步态预测和正则化的人重识别

基于单张图像的步态预测和正则化的人重识别

摘要

换衣行人重识别(CC-ReID)旨在在不同地点长时间内(例如数天)匹配同一行人,因此不可避免地会遇到换衣带来的挑战。本文中,我们专注于在更具挑战性的场景下有效解决CC-ReID问题,即仅从一张图像出发,这使得实时监控应用中的高效且无延迟的行人识别成为可能。具体而言,我们引入步态识别作为辅助任务,通过利用个人独特且与衣物无关的步态信息,驱动图像ReID模型学习与衣物无关的表示方法,并将该框架命名为GI-ReID。GI-ReID采用双流架构,包括一个图像ReID流和一个辅助步态识别流(Gait-Stream)。为了提高计算效率,在推理阶段会丢弃Gait-Stream,但在训练过程中它作为一个调节器,鼓励ReID流捕捉与衣物无关的生物运动特征。为了从单张图像中获取时间连续的运动线索,我们为Gait-Stream设计了一个步态序列预测(GSP)模块以丰富步态信息。最后,在两个流之间强制执行高层次语义一致性,以实现有效的知识正则化。在多个基于图像的换衣行人重识别基准数据集(如LTCC、PRCC、Real28和VC-Clothes)上的实验表明,GI-ReID在性能上优于现有最佳方法。代码已发布在 https://github.com/jinx-USTC/GI-ReID。

代码仓库

jinx-USTC/GI-ReID
官方
pytorch

基准测试

基准方法指标
person-re-identification-on-ltccGI-ReID
Rank-1: 27.3
mAP: 10.4
person-re-identification-on-marsBaseline + GS + SC (ours)
Rank-1: 88.32
mAP: 80.41
person-re-identification-on-prccGI-ReID
Rank-1: 33.3
person-re-identification-on-vc-clothesGI-ReID
Rank-1: 64.5
mAP: 57.8

用 AI 构建 AI

从想法到上线——通过免费 AI 协同编程、开箱即用的环境和市场最优价格的 GPU 加速您的 AI 开发

AI 协同编程
即用型 GPU
最优价格
立即开始

Hyper Newsletters

订阅我们的最新资讯
我们会在北京时间 每周一的上午九点 向您的邮箱投递本周内的最新更新
邮件发送服务由 MailChimp 提供
基于单张图像的步态预测和正则化的人重识别 | 论文 | HyperAI超神经