4 个月前

将多视图检测与跟踪提升至鸟瞰视角

将多视图检测与跟踪提升至鸟瞰视角

摘要

利用多视图聚合为解决多目标跟踪和检测中的遮挡和漏检等问题提供了一种有前景的解决方案。近年来,通过将所有视图战略性地投影到地面平面并从鸟瞰视角进行检测分析,多视图检测和3D物体识别的性能得到了显著提升。在本文中,我们比较了现代提升方法(包括无参数和有参数的方法)与多视图聚合。此外,我们提出了一种架构,该架构通过聚合多个时间步长的特征来学习鲁棒检测,并结合基于外观和运动的线索进行跟踪。目前大多数跟踪方法要么专注于行人,要么专注于车辆。在我们的研究中,我们将这两种分支结合起来,并在跨场景设置中为多视图检测增加了新的挑战。我们的方法在两个领域的三个公开数据集上进行了泛化测试:(1) 行人:Wildtrack 和 MultiviewX;(2) 路边感知:Synthehicle,在检测和跟踪方面均达到了最先进的性能。https://github.com/tteepe/TrackTacular

代码仓库

tteepe/tracktacular
官方
pytorch
GitHub 中提及

基准测试

基准方法指标
multi-object-tracking-on-multiviewxTrackTacular (Bilinear Sampling)
IDF1: 85.6
MOTA: 92.4
multi-object-tracking-on-wildtrackTrackTacular (Bilinear Sampling)
IDF1: 95.3
MOTA: 91.8
multiview-detection-on-multiviewxTrackTacular (Bilinear Sampling)
MODA: 96.5
MODP: 75.0
Recall: 97.1
multiview-detection-on-wildtrackTrackTacular (Depth Splatting)
MODA: 93.2
MODP: 77.5
Recall: 95.8

用 AI 构建 AI

从想法到上线——通过免费 AI 协同编程、开箱即用的环境和市场最优价格的 GPU 加速您的 AI 开发

AI 协同编程
即用型 GPU
最优价格
立即开始

Hyper Newsletters

订阅我们的最新资讯
我们会在北京时间 每周一的上午九点 向您的邮箱投递本周内的最新更新
邮件发送服务由 MailChimp 提供
将多视图检测与跟踪提升至鸟瞰视角 | 论文 | HyperAI超神经