4 个月前

ARTrackV2:提示自回归跟踪器关注何处及如何描述

ARTrackV2:提示自回归跟踪器关注何处及如何描述

摘要

我们介绍了ARTrackV2,该系统集成了跟踪领域的两个关键方面:确定目标对象的位置(定位)和描述其在视频帧间的外观(外观分析)。在此前版本的基础上,ARTrackV2通过引入一个统一的生成框架,以自回归的方式“读取”目标对象的轨迹并“重述”其外观。这种方法促进了时间连续性的建模方法,该方法在先前估计的引导下,对运动和视觉特征的联合演化进行建模。此外,ARTrackV2以其高效性和简洁性脱颖而出,摒弃了效率较低的帧内自回归以及用于外观更新的手动调整参数。尽管设计简单,ARTrackV2在主流基准数据集上仍达到了最先进的性能,并展示了显著的效率提升。特别是在GOT-10k数据集上,ARTrackV2取得了79.5%的AO分数,在TrackingNet数据集上取得了86.1%的AUC分数,同时比ARTrack快3.6倍。代码将对外发布。

代码仓库

miv-xjtu/artrack
官方
pytorch

基准测试

基准方法指标
visual-object-tracking-on-got-10kARTrackV2-L
Average Overlap: 79.5
Success Rate 0.5: 87.8
Success Rate 0.75: 79.6
visual-object-tracking-on-lasotARTrackV2-L
AUC: 73.6
Normalized Precision: 82.8
Precision: 81.1
visual-object-tracking-on-lasot-extARTrackV2-L
AUC: 53.4
Normalized Precision: 63.7
Precision: 60.2
visual-object-tracking-on-needforspeedARTrackV2-L
AUC: 0.684
visual-object-tracking-on-tnl2kARTrackV2-L
AUC: 61.6
visual-object-tracking-on-trackingnetARTrackV2-L
Accuracy: 86.1
Normalized Precision: 90.4
Precision: 86.2
visual-object-tracking-on-uav123ARTrackV2-L
AUC: 0.717

用 AI 构建 AI

从想法到上线——通过免费 AI 协同编程、开箱即用的环境和市场最优价格的 GPU 加速您的 AI 开发

AI 协同编程
即用型 GPU
最优价格
立即开始

Hyper Newsletters

订阅我们的最新资讯
我们会在北京时间 每周一的上午九点 向您的邮箱投递本周内的最新更新
邮件发送服务由 MailChimp 提供
ARTrackV2:提示自回归跟踪器关注何处及如何描述 | 论文 | HyperAI超神经