摘要

语义分割是许多视觉应用中理解场景及其内含物体的关键步骤。近年来，高光谱成像技术的进步使得该技术在驾驶场景中的应用成为可能，人们希望这些设备的感知能力能为驾驶提供比传统RGB相机更多的优势。尽管已经存在一些数据集，但目前尚缺乏一个标准基准来系统地衡量这一任务的进展并评估高光谱数据的优势。本文旨在填补这一空白，通过提供高光谱语义分割基准（HS3-Bench）来实现这一目标。该基准结合了来自三个驾驶场景数据集的注释高光谱图像，并提供了标准化的度量方法、实现方案和评估协议。我们利用该基准推导出两种强大的基线模型，在有无预训练的情况下均超越了现有各数据集上的最佳性能。此外，我们的结果表明，现有的基于学习的方法从额外的RGB训练数据中获益更多，而不是从额外的高光谱通道中获益更多。这为未来关于驾驶场景中高光谱成像用于语义分割的研究提出了重要的问题。运行基准测试和强大基线方法的代码可在 https://github.com/nickstheisen/hyperseg 获取。