4 个月前

渐进式姿态注意力转移用于人物图像生成

渐进式姿态注意力转移用于人物图像生成

摘要

本文提出了一种新的生成对抗网络(Generative Adversarial Network, GAN)用于姿态迁移,即将给定人物的姿态迁移到目标姿态。该网络的生成器由一系列姿态注意力迁移块(Pose-Attentional Transfer Blocks)组成,每个块负责迁移其关注的特定区域,逐步生成人物图像。与先前的研究相比,我们生成的人物图像在外观一致性和形状一致性方面表现更佳,因此显著更加逼真。本文提出的网络在Market-1501和DeepFashion数据集上通过定性和定量分析验证了其有效性和高效性。此外,所提出的架构还可以生成用于人物再识别的训练图像,缓解数据不足的问题。代码和模型可在以下地址获取:https://github.com/tengteng95/Pose-Transfer.git。

代码仓库

tengteng95/Pose-Transfer
官方
pytorch
GitHub 中提及
zsypotter/pose_transfer_keypoint
pytorch
GitHub 中提及

基准测试

基准方法指标
pose-transfer-on-deep-fashionProgressive Pose Attention
DS: 0.976
IS: 3.209
PCKh: 0.96
Retrieval Top10 Recall: 17.84
SSIM: 0.773
pose-transfer-on-market-1501Progressive Pose Attention
DS: 0.74
IS: 3.323
PCKh: 0.94
SSIM: 0.311
mask-IS: 3.773
mask-SSIM: 0.811

用 AI 构建 AI

从想法到上线——通过免费 AI 协同编程、开箱即用的环境和市场最优价格的 GPU 加速您的 AI 开发

AI 协同编程
即用型 GPU
最优价格
立即开始

Hyper Newsletters

订阅我们的最新资讯
我们会在北京时间 每周一的上午九点 向您的邮箱投递本周内的最新更新
邮件发送服务由 MailChimp 提供
渐进式姿态注意力转移用于人物图像生成 | 论文 | HyperAI超神经