3 个月前

全景 nuScenes:面向 LiDAR 全景分割与跟踪的大规模基准数据集

全景 nuScenes:面向 LiDAR 全景分割与跟踪的大规模基准数据集

摘要

全景场景理解与动态目标跟踪对于机器人及自动驾驶车辆在城市环境中的导航至关重要。由于激光雷达(LiDAR)能够提供与光照无关的高精度几何场景描述,基于LiDAR点云执行此类任务可获得可靠的预测结果。然而,现有数据集在城市场景类型上缺乏多样性,且动态物体实例数量有限,这不仅制约了相关任务的学习效果,也影响了所提出方法的可信基准评估。本文提出一个大规模的全景nuScenes基准数据集,该数据集在广受欢迎的nuScenes数据集基础上,新增了逐点标注的语义分割、全景分割及全景跟踪任务的真值标签。为便于对比,我们在所提出的数据集上提供了多个强基准模型。此外,我们分析了现有全景跟踪评估指标的局限性,并提出了新颖的以实例为中心的PAT(Instance-Centric Panoptic Tracking)评估指标,有效解决了现有方法中的关键问题。通过全面的实验验证,我们展示了Panoptic nuScenes相较于现有数据集的显著优势,并已在nuScenes.org开放在线评估服务器。我们相信,这一扩展将显著推动动态城市环境场景理解新方法的研究进展。

代码仓库

nutonomy/nuscenes-devkit
GitHub 中提及

基准测试

基准方法指标
panoptic-segmentation-on-panoptic-nuscenesPolarSeg-Panoptic
PQ: 63.4
RQ: 75.3
SQ: 83.9
mIoU: 66.9
panoptic-segmentation-on-panoptic-nuscenes-1(AF)2-S3Net + CenterPoint
PQ: 76.8
RQ: 85.4
SQ: 89.5
mIoU: 78.8

用 AI 构建 AI

从想法到上线——通过免费 AI 协同编程、开箱即用的环境和市场最优价格的 GPU 加速您的 AI 开发

AI 协同编程
即用型 GPU
最优价格
立即开始

Hyper Newsletters

订阅我们的最新资讯
我们会在北京时间 每周一的上午九点 向您的邮箱投递本周内的最新更新
邮件发送服务由 MailChimp 提供
全景 nuScenes:面向 LiDAR 全景分割与跟踪的大规模基准数据集 | 论文 | HyperAI超神经