3 个月前

无监督光流中的关键因素

无监督光流中的关键因素

摘要

我们系统地比较并分析了无监督光流算法中的一系列关键组件,以确定在光照一致性损失、遮挡处理以及平滑性正则化方面哪种方法最为有效。在这一研究过程中,我们还提出了一系列新颖的模型改进策略,包括代价体归一化、在遮挡掩码处停止梯度传播、在光流场上采样前增强平滑性,以及通过图像缩放实现持续的自监督学习。通过将上述研究结果与所提出的改进组件相结合,我们提出了一种全新的无监督光流方法。该方法在KITTI 2015数据集上的表现显著超越了此前的无监督最优方法,并达到了与监督学习方法FlowNet2相当的性能水平,同时在模型结构上显著简化,相较于同类方法更加简洁高效。

基准测试

基准方法指标
optical-flow-estimation-on-sintel-clean-2UFlow
Average End-Point Error: 5.21
optical-flow-estimation-on-sintel-final-2UFlow
Average End-Point Error: 6.50

用 AI 构建 AI

从想法到上线——通过免费 AI 协同编程、开箱即用的环境和市场最优价格的 GPU 加速您的 AI 开发

AI 协同编程
即用型 GPU
最优价格
立即开始

Hyper Newsletters

订阅我们的最新资讯
我们会在北京时间 每周一的上午九点 向您的邮箱投递本周内的最新更新
邮件发送服务由 MailChimp 提供
无监督光流中的关键因素 | 论文 | HyperAI超神经