4 个月前

TextureGAN:用纹理块控制深度图像合成

TextureGAN:用纹理块控制深度图像合成

摘要

本文中,我们研究了由草图、颜色和纹理引导的深度图像合成。以往的图像合成方法可以通过草图和颜色笔触进行控制,但我们首次探讨了纹理控制的应用。我们允许用户在草图上任意位置和尺度放置纹理补丁,以控制所需的输出纹理。我们的生成网络学会了根据这些纹理建议合成对象。为了实现这一目标,我们在对抗损失和内容损失之外开发了一种局部纹理损失来训练生成网络。我们使用从真实图像生成的草图和从独立纹理数据库中采样的纹理进行了实验,结果表明,我们提出的算法能够生成符合用户控制的合理图像。消融研究表明,与直接应用现有方法相比,我们提出的流程可以生成更加逼真的图像。

代码仓库

kaziwasaleh/mask-guided
pytorch
GitHub 中提及
yuchuanhui/TextureGanPython3
pytorch
GitHub 中提及
janesjanes/Pytorch-TextureGAN
pytorch
GitHub 中提及

基准测试

基准方法指标
image-reconstruction-on-edge-to-handbagsXian et al._
FID: 60.848
LPIPS: 0.171
image-reconstruction-on-edge-to-shoesXian et al._
FID: 44.762
LPIPS: 0.124

用 AI 构建 AI

从想法到上线——通过免费 AI 协同编程、开箱即用的环境和市场最优价格的 GPU 加速您的 AI 开发

AI 协同编程
即用型 GPU
最优价格
立即开始

Hyper Newsletters

订阅我们的最新资讯
我们会在北京时间 每周一的上午九点 向您的邮箱投递本周内的最新更新
邮件发送服务由 MailChimp 提供
TextureGAN:用纹理块控制深度图像合成 | 论文 | HyperAI超神经