4 个月前

ARNIQA:学习图像质量评估的畸变流形

ARNIQA:学习图像质量评估的畸变流形

摘要

无参考图像质量评估(NR-IQA)旨在开发无需高质量参考图像即可与人类感知相一致的图像质量测量方法。在本研究中,我们提出了一种名为 ARNIQA(用于图像质量评估的自监督学习畸变流形方法(leArning distoRtion maNifold for Image Quality Assessment))的方法,以建模图像畸变流形并以内在的方式获得质量表示。首先,我们引入了一个图像退化模型,该模型随机组合连续应用的畸变序列。通过这种方式,我们可以合成具有多种退化模式的图像。其次,我们提出通过最大化不同图像中同等程度畸变的补丁表示之间的相似度来训练我们的模型,尽管这些图像的内容可能不同。因此,以相同方式退化的图像是在畸变流形中相邻的位置上对应的。最后,我们使用一个简单的线性回归器将图像表示映射到质量评分,而无需微调编码器权重。实验结果表明,我们的方法在多个数据集上达到了最先进的性能。此外,ARNIQA 在数据效率、泛化能力和鲁棒性方面相比竞争方法表现出显著优势。代码和模型已在 https://github.com/miccunifi/ARNIQA 公开发布。

代码仓库

miccunifi/arniqa
官方
pytorch
GitHub 中提及

基准测试

基准方法指标
no-reference-image-quality-assessment-onARNIQA
PLCC: 0.901
SRCC: 0.880
no-reference-image-quality-assessment-on-1ARNIQA
PLCC: 0.912
SRCC: 0.908
no-reference-image-quality-assessment-on-csiqARNIQA
PLCC: 0.973
SRCC: 0.962
no-reference-image-quality-assessment-on-uhdARNIQA
PLCC: 0.694
SRCC: 0.739

用 AI 构建 AI

从想法到上线——通过免费 AI 协同编程、开箱即用的环境和市场最优价格的 GPU 加速您的 AI 开发

AI 协同编程
即用型 GPU
最优价格
立即开始

Hyper Newsletters

订阅我们的最新资讯
我们会在北京时间 每周一的上午九点 向您的邮箱投递本周内的最新更新
邮件发送服务由 MailChimp 提供
ARNIQA:学习图像质量评估的畸变流形 | 论文 | HyperAI超神经