4 个月前

通过学习逆向相机管道实现单图像HDR重建

通过学习逆向相机管道实现单图像HDR重建

摘要

从单张低动态范围(LDR)输入图像中恢复高动态范围(HDR)图像是一个挑战,因为相机传感器的量化和饱和会导致欠曝光和过曝光区域的细节丢失。与现有的基于学习的方法不同,我们的核心思想是将LDR图像生成流程的领域知识融入模型中。我们将HDR到LDR图像生成流程建模为三个步骤:(1) 动态范围裁剪,(2) 相机响应函数的非线性映射,以及 (3) 量化。然后,我们提出学习三个专门的卷积神经网络(CNN)来逆向执行这些步骤。通过将问题分解为具体的子任务,我们施加了有效的物理约束,以促进各个子网络的训练。最后,我们对整个模型进行端到端的联合微调,以减少误差累积。通过在多种图像数据集上进行广泛的定量和定性实验,我们证明了所提出的方法在性能上优于现有的单张图像HDR重建算法。

代码仓库

alex04072000/SingleHDR
官方
tf
GitHub 中提及

基准测试

基准方法指标
inverse-tone-mapping-on-msu-hdr-videoSingleHDR
HDR-PSNR: 34.2872
HDR-SSIM: 0.9845
HDR-VQM: 0.2630
inverse-tone-mapping-on-vds-datasetLiu et al.
HDR-VDP-2: 56.97
HDR-VDP-3: 8.24
Kim and Kautz TMO-PSNR: 28.00
PU21-PSNR: 25.69
PU21-SSIM: 0.8797
Reinhard'TMO-PSNR: 30.88

用 AI 构建 AI

从想法到上线——通过免费 AI 协同编程、开箱即用的环境和市场最优价格的 GPU 加速您的 AI 开发

AI 协同编程
即用型 GPU
最优价格
立即开始

Hyper Newsletters

订阅我们的最新资讯
我们会在北京时间 每周一的上午九点 向您的邮箱投递本周内的最新更新
邮件发送服务由 MailChimp 提供
通过学习逆向相机管道实现单图像HDR重建 | 论文 | HyperAI超神经