3 个月前

DaDe:面向流式感知的延迟自适应检测器

DaDe:面向流式感知的延迟自适应检测器

摘要

在自动驾驶系统中,实现低延迟的环境感知至关重要。然而,在实时处理过程中,周围环境可能在处理完成前已发生变化,而当前的检测模型无法应对处理完成后出现的环境动态变化。为评估实时视频感知中的延迟与精度,研究提出了流式感知(streaming perception)框架。但在实际应用中,受限于硬件资源、高温等复杂因素,又衍生出一系列新问题。为此,本文提出一种能够实时反映处理延迟并输出最合理结果的模型。通过引入所提出的特征队列(feature queue)与特征选择模块(feature select module),系统可在不增加任何计算开销的前提下,实现对未来特定时间步状态的预测。该方法在Argoverse-HD数据集上进行了验证,结果显示,在存在延迟的情况下,其性能优于2022年12月时的最先进方法。相关代码已开源,地址为:https://github.com/danjos95/DADE。

代码仓库

danjos95/dade
官方
pytorch
GitHub 中提及

基准测试

基准方法指标
real-time-object-detection-on-argoverse-hd-4DaDe
sAP: 42.3

用 AI 构建 AI

从想法到上线——通过免费 AI 协同编程、开箱即用的环境和市场最优价格的 GPU 加速您的 AI 开发

AI 协同编程
即用型 GPU
最优价格
立即开始

Hyper Newsletters

订阅我们的最新资讯
我们会在北京时间 每周一的上午九点 向您的邮箱投递本周内的最新更新
邮件发送服务由 MailChimp 提供
DaDe:面向流式感知的延迟自适应检测器 | 论文 | HyperAI超神经