4 个月前

端到端可微学习多曝光图像的HDR图像合成

端到端可微学习多曝光图像的HDR图像合成

摘要

最近,基于给定单次曝光的多曝光堆栈进行高动态范围(HDR)图像重建的技术利用深度学习框架生成高质量的HDR图像。这些传统的网络主要集中在曝光传递任务上,以重建多曝光堆栈。因此,它们通常无法将多曝光堆栈融合成视觉上令人愉悦的HDR图像,因为逆向伪影会出现。我们通过提出一种全新的框架来解决基于堆栈重建方法中的这一问题,该框架包含一个完全可微分的高动态范围成像(HDRI)过程。通过显式使用损失函数,该损失函数比较网络输出与真实HDR图像,我们的框架能够使生成多曝光堆栈用于HDRI的神经网络稳定训练。换句话说,我们的可微分HDR合成层帮助深度神经网络在反映多曝光图像之间精确相关性的HDRI过程中训练生成多曝光堆栈。此外,我们的网络采用图像分解和递归过程来促进曝光传递任务并自适应地响应递归频率。实验结果表明,所提出的网络在曝光传递任务和整个HDRI过程方面均优于现有最先进的定量和定性结果。

代码仓库

JungHeeKim29/DiffHDRsyn
官方
pytorch
GitHub 中提及

基准测试

基准方法指标
inverse-tone-mapping-on-vds-datasetDiffHDRsyn
HDR-VDP-2: 58.81
HDR-VDP-3: 8.77
PU21-PSNR: 28.33
PU21-SSIM: 0.9388
Reinhard'TMO-PSNR: 34.12

用 AI 构建 AI

从想法到上线——通过免费 AI 协同编程、开箱即用的环境和市场最优价格的 GPU 加速您的 AI 开发

AI 协同编程
即用型 GPU
最优价格
立即开始

Hyper Newsletters

订阅我们的最新资讯
我们会在北京时间 每周一的上午九点 向您的邮箱投递本周内的最新更新
邮件发送服务由 MailChimp 提供
端到端可微学习多曝光图像的HDR图像合成 | 论文 | HyperAI超神经