3 个月前

TempSAL - 面向深度显著性预测的时序信息挖掘

TempSAL - 面向深度显著性预测的时序信息挖掘

摘要

深度显著性预测算法在补充目标识别功能方面发挥着重要作用,通常依赖于场景上下文、语义关系、注视方向以及物体差异性等额外信息。然而,现有模型均未考虑图像观察过程中注视转移的时间特性。为此,我们提出一种新型显著性预测模型,该模型通过利用人类的时间注意力模式,学习在连续时间区间内输出显著性图。我们的方法通过融合学习得到的时间显著性图,对局部显著性预测进行动态调制。实验结果表明,该方法在SALICON基准数据集和CodeCharts1k数据集上均优于当前最先进的模型,包括多时长显著性模型。相关代码已公开发布于GitHub。

基准测试

基准方法指标
saliency-prediction-on-saleciTempSAL
KL: 0.712
saliency-prediction-on-saliconTempSAL
AUC: 0.869
CC: 0.911
KLD: 0.195
NSS: 1.967
SIM: 0.800
sAUC: 0.745

用 AI 构建 AI

从想法到上线——通过免费 AI 协同编程、开箱即用的环境和市场最优价格的 GPU 加速您的 AI 开发

AI 协同编程
即用型 GPU
最优价格
立即开始

Hyper Newsletters

订阅我们的最新资讯
我们会在北京时间 每周一的上午九点 向您的邮箱投递本周内的最新更新
邮件发送服务由 MailChimp 提供
TempSAL - 面向深度显著性预测的时序信息挖掘 | 论文 | HyperAI超神经