4 个月前

模型预测变换用于跟踪

模型预测变换用于跟踪

摘要

基于优化的跟踪方法通过集成目标模型预测模块,通过最小化目标函数提供了有效的全局推理,已取得广泛成功。虽然这种归纳偏置集成了有价值的领域知识,但它限制了跟踪网络的表达能力。因此,在本研究中,我们提出了一种采用基于Transformer的目标模型预测模块的跟踪器架构。Transformer在具有较少归纳偏置的情况下能够捕捉全局关系,从而使其能够学习更强大的目标模型预测。我们进一步扩展了模型预测器,以估计一组用于精确边界框回归的权重。最终的跟踪器依赖于训练数据和测试帧信息,以传递式的方式预测所有权重。我们对提出的跟踪器进行了端到端的训练,并通过在多个跟踪数据集上进行综合实验来验证其性能。我们的跟踪器在三个基准测试中设立了新的最先进水平,在具有挑战性的LaSOT数据集中达到了68.5%的AUC(Area Under Curve)值。

代码仓库

visionml/pytracking
官方
pytorch
GitHub 中提及

基准测试

基准方法指标
video-object-tracking-on-nv-vot211ToMP-50
AUC: 39.25
Precision: 53.01
visual-object-tracking-on-avistToMP
Success Rate: 52.5
visual-object-tracking-on-lasotToMP
Precision: 67.1

用 AI 构建 AI

从想法到上线——通过免费 AI 协同编程、开箱即用的环境和市场最优价格的 GPU 加速您的 AI 开发

AI 协同编程
即用型 GPU
最优价格
立即开始

Hyper Newsletters

订阅我们的最新资讯
我们会在北京时间 每周一的上午九点 向您的邮箱投递本周内的最新更新
邮件发送服务由 MailChimp 提供
模型预测变换用于跟踪 | 论文 | HyperAI超神经