3 个月前

StyleShot:任意风格的快照

StyleShot:任意风格的快照

摘要

本文表明,一个优秀的风格表征对于无需测试阶段微调的泛化风格迁移至关重要且充分。我们通过构建一个风格感知编码器以及一个结构清晰的风格数据集——StyleGallery,实现了这一目标。该风格感知编码器经过专门设计以支持风格学习,采用解耦训练策略,能够提取富有表现力的风格表征;而StyleGallery则有效提升了模型的泛化能力。为进一步增强图像驱动的风格迁移效果,我们引入了内容融合编码器。我们强调,所提出的方法——StyleShot,虽结构简洁,却在无需测试阶段调优的情况下,能够有效模拟多种目标风格,包括3D风格、扁平风格、抽象风格,甚至细粒度风格。大量严谨的实验验证表明,相较于现有最先进方法,StyleShot在广泛多样的风格迁移任务中均展现出更优的性能。项目主页详见:https://styleshot.github.io/。

代码仓库

Vill-Lab/forkOfStyleShot
pytorch
GitHub 中提及
open-mmlab/StyleShot
官方
pytorch
GitHub 中提及

基准测试

基准方法指标
style-transfer-on-stylebenchStyleShot
CLIP Score: 0.660

用 AI 构建 AI

从想法到上线——通过免费 AI 协同编程、开箱即用的环境和市场最优价格的 GPU 加速您的 AI 开发

AI 协同编程
即用型 GPU
最优价格
立即开始

Hyper Newsletters

订阅我们的最新资讯
我们会在北京时间 每周一的上午九点 向您的邮箱投递本周内的最新更新
邮件发送服务由 MailChimp 提供
StyleShot:任意风格的快照 | 论文 | HyperAI超神经