4 个月前

3D-LaneNet:端到端的三维多车道检测

3D-LaneNet:端到端的三维多车道检测

摘要

我们介绍了一种网络,该网络可以直接从单个图像预测道路场景中的三维车道布局。这项工作标志着首次尝试在不假设已知恒定车道宽度且不依赖预先映射环境的情况下,通过车载传感器解决这一任务。我们的网络架构,3D-LaneNet,引入了两个新的概念:网络内部逆透视投影(IPM)和基于锚点的车道表示。网络内部的IPM投影促进了常规图像视图和俯视图之间的双重表征信息流。基于每列一个锚点的输出表征使我们的端到端方法得以实现,取代了常见的启发式方法(如聚类和异常值剔除),将车道估计问题转化为目标检测问题。此外,我们的方法显式处理了复杂的场景,例如车道合并和分叉。我们在两个新的三维车道数据集上展示了实验结果,一个是合成数据集,另一个是真实数据集。为了与现有方法进行比较,我们在仅使用图像的tuSimple车道检测基准上测试了我们的方法,取得了与最先进方法相当的性能。

代码仓库

基准测试

基准方法指标
3d-lane-detection-on-apollo-synthetic-3d-lane3D-LaneNet
F1: 86.4
X error far: 0.477
X error near: 0.068
Z error far: 0.202
Z error near: 0.015
3d-lane-detection-on-openlane3D-LaneNet
Curve: 46.5
Extreme Weather: 47.5
F1 (all): 44.1
FPS (pytorch): -
Intersection: 32.1
Merge u0026 Split: 41.7
Night: 41.5
Up u0026 Down: 40.8

用 AI 构建 AI

从想法到上线——通过免费 AI 协同编程、开箱即用的环境和市场最优价格的 GPU 加速您的 AI 开发

AI 协同编程
即用型 GPU
最优价格
立即开始

Hyper Newsletters

订阅我们的最新资讯
我们会在北京时间 每周一的上午九点 向您的邮箱投递本周内的最新更新
邮件发送服务由 MailChimp 提供
3D-LaneNet:端到端的三维多车道检测 | 论文 | HyperAI超神经