4 个月前

可见性感知多视图立体网络

可见性感知多视图立体网络

摘要

基于学习的多视图立体(MVS)方法已经展示了令人鼓舞的结果。然而,现有的大多数网络并未显式考虑像素级别的可见性,导致被遮挡像素的成本聚合出现错误。在本文中,我们通过匹配不确定性估计,在MVS网络中显式推断并整合了像素级别的遮挡信息。成对的不确定性图与成对深度图一起推断,并进一步作为多视图成本体融合过程中的加权指导。因此,在成本融合过程中,被遮挡像素的负面影响得到了抑制。所提出的框架Vis-MVSNet显著提高了严重遮挡场景下的深度精度。我们在DTU、BlendedMVS和Tanks and Temples数据集上进行了广泛的实验,以验证所提框架的有效性。

代码仓库

jzhangbs/Vis-MVSNet
官方
pytorch
GitHub 中提及

基准测试

基准方法指标
3d-reconstruction-on-dtuVis-MVSNet
Acc: 0.369
Comp: 0.361
Overall: 0.365
point-clouds-on-dtuVis-MVSNet
Overall: 0.365
point-clouds-on-tanks-and-templesVis-MVSNet
Mean F1 (Intermediate): 60.03

用 AI 构建 AI

从想法到上线——通过免费 AI 协同编程、开箱即用的环境和市场最优价格的 GPU 加速您的 AI 开发

AI 协同编程
即用型 GPU
最优价格
立即开始

Hyper Newsletters

订阅我们的最新资讯
我们会在北京时间 每周一的上午九点 向您的邮箱投递本周内的最新更新
邮件发送服务由 MailChimp 提供
可见性感知多视图立体网络 | 论文 | HyperAI超神经