4 个月前

时序图像超分辨率中的排列不变性和不确定性

时序图像超分辨率中的排列不变性和不确定性

摘要

近期的研究表明,深度神经网络在超分辨率遥感图像处理方面表现出极高的效率,可以从多时相的低分辨率图像集合中生成高分辨率图像。然而,现有的模型忽视了时间排列问题,即输入图像的时间顺序对于超分辨率任务没有相关的信息价值,这导致模型在训练过程中对有限的真实数据利用效率低下。因此,模型不应学习依赖于时间顺序的特征提取器。本文展示了如何构建一个完全不受时间排列影响的模型,该方法显著提高了性能和数据利用效率。此外,我们研究了如何量化超分辨图像的不确定性,以便最终用户了解产品的局部质量。我们展示了不确定性与序列中的时间变化之间的相关性,并证明量化不确定性可以进一步提升模型性能。在Proba-V挑战数据集上的实验结果表明,我们的方法在无需自集成的情况下显著优于现有技术,并且数据利用效率更高,在仅使用25%的训练数据量的情况下达到了挑战赛优胜者的性能水平。

代码仓库

基准测试

基准方法指标
multi-frame-super-resolution-on-proba-vPIUnet
Normalized cPSNR: 0.9313717296835213

用 AI 构建 AI

从想法到上线——通过免费 AI 协同编程、开箱即用的环境和市场最优价格的 GPU 加速您的 AI 开发

AI 协同编程
即用型 GPU
最优价格
立即开始

Hyper Newsletters

订阅我们的最新资讯
我们会在北京时间 每周一的上午九点 向您的邮箱投递本周内的最新更新
邮件发送服务由 MailChimp 提供
时序图像超分辨率中的排列不变性和不确定性 | 论文 | HyperAI超神经