摘要

受近期利用形状先验实现鲁棒3D重建方法成功的启发，我们提出了一种新的递归神经网络架构，称为3D递归重建神经网络（3D-R2N2）。该网络从大量合成数据中学习将物体图像映射到其底层3D形状。我们的网络可以接收一个或多个来自任意视角的物体实例图像，并输出以3D占用网格形式表示的物体重建结果。与大多数先前的工作不同，我们的网络在训练和测试过程中不需要任何图像注释或物体类别标签。我们广泛的实验分析表明，我们的重建框架在单视图重建方面优于现有最先进方法，并且在传统SFM/SLAM方法因缺乏纹理和/或基线过宽而失效的情况下，仍能实现物体的3D重建。