摘要

本文旨在利用卫星-地面图像对开发一种精确的三维几何表示方法，以生成具有三维意识的地面视图。我们关注的是从卫星图像中合成地面视图这一具有挑战性的问题。受体积神经渲染中密度场表示的启发，我们提出了一种新的方法，称为Sat2Density。该方法利用地面全景图在天空区域和非天空区域的特性，从几何角度学习三维场景的真实密度场。与其他需要额外深度信息进行训练的方法不同，我们的Sat2Density可以通过密度表示自动学习准确且真实可靠的三维几何结构，而无需深度监督。这一进展显著提升了地面全景图合成任务的效果。此外，我们的研究还提供了一种新的几何视角来理解卫星图像与地面视图图像在三维空间中的关系。