3 个月前

ST-GREED:用于帧率相关视频质量预测的时空广义熵差

ST-GREED:用于帧率相关视频质量预测的时空广义熵差

摘要

我们研究了在帧率多样的视频(包括高帧率,HFR)上进行帧率相关视频质量评估(VQA)的问题。更广泛地,我们探讨了帧率对感知质量的影响,以及帧率与压缩共同作用对主观感知质量的影响机制。为此,我们提出了一种名为时空广义熵差(Space-Time GeneRalized Entropic Difference, GREED)的客观VQA模型。该模型通过分析视频在空间与时间带通子带中的统计特性来评估质量。具体而言,采用广义高斯分布(Generalized Gaussian Distribution, GGD)对带通响应进行建模,并利用在GGD模型下参考视频与失真视频之间的熵差异,捕捉由帧率变化引起的质量波动。熵差在多个时空子带中分别计算,并通过一个可学习的回归器进行融合。大量实验结果表明,在LIVE-YT-HFR数据集上,GREED相较于现有主流VQA模型取得了当前最优的性能表现。此外,GREED所采用的特征具有高度泛化能力,在标准的非高帧率VQA数据集上亦能取得具有竞争力的评估效果。GREED的代码实现已公开发布,可通过以下链接获取:https://github.com/pavancm/GREED

代码仓库

基准测试

基准方法指标
video-quality-assessment-on-live-yt-hfrST-GREED
SRCC: 0.8822
video-quality-assessment-on-msu-video-quality-1ST-GREED
KLCC: 0.5905
PLCC: 0.8116
SRCC: 0.7547

用 AI 构建 AI

从想法到上线——通过免费 AI 协同编程、开箱即用的环境和市场最优价格的 GPU 加速您的 AI 开发

AI 协同编程
即用型 GPU
最优价格
立即开始

Hyper Newsletters

订阅我们的最新资讯
我们会在北京时间 每周一的上午九点 向您的邮箱投递本周内的最新更新
邮件发送服务由 MailChimp 提供
ST-GREED:用于帧率相关视频质量预测的时空广义熵差 | 论文 | HyperAI超神经