4 个月前

基于均值回复随机微分方程的图像复原

基于均值回复随机微分方程的图像复原

摘要

本文提出了一种基于随机微分方程(SDE)的通用图像修复方法。该方法的核心在于构建一个均值回归SDE,该方程将高质量图像转换为以固定高斯噪声为均值状态的退化图像。然后,通过模拟相应的逆时间SDE,我们能够在不依赖任何特定任务先验知识的情况下恢复低质量图像的原始状态。关键的是,所提出的均值回归SDE具有闭式解,使我们能够计算随时间变化的真实得分,并使用神经网络进行学习。此外,我们提出了一种最大似然目标函数来学习最优的逆向轨迹,这有助于稳定训练过程并提高修复效果。实验结果表明,我们的方法在图像去雨、去模糊和去噪的定量比较中表现出极高的竞争力,并在两个去雨数据集上达到了新的最先进水平。最后,通过在图像超分辨率、修复和去雾方面的定性结果进一步证明了我们方法的通用适用性。代码可在https://github.com/Algolzw/image-restoration-sde 获取。

代码仓库

algolzw/image-restoration-sde
官方
pytorch
GitHub 中提及

基准测试

基准方法指标
image-deblurring-on-goproIR-SDE
FID: 6.32
LPIPS: 0.064
PSNR: 30.7
SSIM: 0.901
single-image-deraining-on-rain100hIR-SDE
FID: 18.64
LPIPS: 0.047
PSNR: 31.65
SSIM: 0.9041
single-image-deraining-on-rain100lIR-SDE
FID: 7.94
LPIPS: 0.014
PSNR: 38.3
SSIM: 0.9805

用 AI 构建 AI

从想法到上线——通过免费 AI 协同编程、开箱即用的环境和市场最优价格的 GPU 加速您的 AI 开发

AI 协同编程
即用型 GPU
最优价格
立即开始

Hyper Newsletters

订阅我们的最新资讯
我们会在北京时间 每周一的上午九点 向您的邮箱投递本周内的最新更新
邮件发送服务由 MailChimp 提供
基于均值回复随机微分方程的图像复原 | 论文 | HyperAI超神经