3 个月前

图像到图像转换中的层功率

图像到图像转换中的层功率

摘要

我们提出一种简洁的架构,用于解决无配对图像到图像的转换任务,如风格迁移、类别转换、去噪、去模糊、去块效应等。该方法基于一个具有固定权重的图像自编码器架构。针对每一项任务,我们在隐空间中学习一个残差块,通过迭代调用该残差块,直至达到目标域。为缓解迭代过程中的指数累积效应,需采用特定的训练策略。在测试阶段,该方法具有多项优势:参数量有限,且其可组合式设计允许通过调整迭代次数来调控变换的强度。这一特性在实际应用中尤为有用,例如当待抑制的噪声类型或强度事先未知时。实验结果表明,该方法在多种图像转换任务中均展现出良好的有效性。在性能方面,我们的模型在显著减少参数量的同时,表现可与CycleGAN相媲美甚至更优。

基准测试

基准方法指标
image-to-image-translation-on-horse2zebraPoL (CycleGAN)
Frechet Inception Distance: 53.0
Number of params: 15.9M
image-to-image-translation-on-photo2vangoghPoL (CycleGAN)
Frechet Inception Distance: 152.7
Number of params: 15.9M
image-to-image-translation-on-vangogh2photoPoL (CycleGAN)
Frechet Inception Distance: 134.4
Number of Params: 15.9M
image-to-image-translation-on-zebra2horsePoL (CycleGAN)
Frechet Inception Distance: 112.3
Number of params: 15.9M

用 AI 构建 AI

从想法到上线——通过免费 AI 协同编程、开箱即用的环境和市场最优价格的 GPU 加速您的 AI 开发

AI 协同编程
即用型 GPU
最优价格
立即开始

Hyper Newsletters

订阅我们的最新资讯
我们会在北京时间 每周一的上午九点 向您的邮箱投递本周内的最新更新
邮件发送服务由 MailChimp 提供
图像到图像转换中的层功率 | 论文 | HyperAI超神经