HyperAIHyperAI

Command Palette

Search for a command to run...

联合建模运动和外观线索以实现鲁棒的RGB-T跟踪

Pengyu Zhang Jie Zhao Dong Wang Huchuan Lu Xiaoyun Yang

摘要

在本研究中,我们提出了一种新颖的RGB-T跟踪框架,通过联合建模外观和运动线索来实现。首先,为了获得一个鲁棒的外观模型,我们开发了一种新的后期融合方法,用于推断RGB和热(T)模态的融合权重图。融合权重由离线训练的全局和局部多模态融合网络确定,并用于线性组合RGB和T模态的响应图。其次,在外观线索不可靠时,我们全面考虑了目标和摄像机的运动线索,以增强跟踪器的鲁棒性。此外,我们还提出了一种跟踪器切换机制,可以灵活地在外观跟踪器和运动跟踪器之间进行切换。在三个最新的RGB-T跟踪数据集上的大量实验结果表明,所提出的跟踪器显著优于其他最先进的算法。


用 AI 构建 AI

从创意到上线——通过免费 AI 协同编码、开箱即用的环境和最优惠的 GPU 价格,加速您的 AI 开发。

AI 协同编码
开箱即用的 GPU
最优定价

HyperAI Newsletters

订阅我们的最新资讯
我们会在北京时间 每周一的上午九点 向您的邮箱投递本周内的最新更新
邮件发送服务由 MailChimp 提供
联合建模运动和外观线索以实现鲁棒的RGB-T跟踪 | 论文 | HyperAI超神经