HyperAIHyperAI

Command Palette

Search for a command to run...

金字塔空洞更深ConvLSTM用于视频显著目标检测

Kin-Man Lam Jianbing Shen Wenguan Wang Sanyuan Zhao Hongmei Song

摘要

本文提出了一种基于新型循环网络架构的快速视频显著目标检测模型,命名为金字塔空洞双向卷积LSTM(Pyramid Dilated Bidirectional ConvLSTM,简称PDB-ConvLSTM)。首先,设计了一个金字塔空洞卷积(Pyramid Dilated Convolution, PDC)模块,用于同时提取多尺度的空间特征。随后,将这些空间特征进行拼接,并输入到扩展的深层双向卷积LSTM(Deeper Bidirectional ConvLSTM,DB-ConvLSTM)中,以学习时空信息。前向和后向的ConvLSTM单元被分别置于两层中,并以级联方式连接,从而促进双向流之间的信息交互,实现更深层次的特征提取。为进一步增强DB-ConvLSTM的表达能力,引入类似PDC的结构,通过多个空洞化的DB-ConvLSTM模块来捕捉多尺度的时空特征。大量实验结果表明,所提方法在性能上显著优于以往的视频显著性检测模型,在单张GPU上实现了高达20帧/秒的实时处理速度。以无监督视频对象分割为例,结合基于条件随机场(CRF)的后处理,该模型在两个主流基准数据集上均取得了当前最优的性能,充分验证了其优越的检测能力与广泛的应用潜力。


用 AI 构建 AI

从创意到上线——通过免费 AI 协同编码、开箱即用的环境和最优惠的 GPU 价格,加速您的 AI 开发。

AI 协同编码
开箱即用的 GPU
最优定价

HyperAI Newsletters

订阅我们的最新资讯
我们会在北京时间 每周一的上午九点 向您的邮箱投递本周内的最新更新
邮件发送服务由 MailChimp 提供