摘要

光流引导的合成为帧插值提供了一个统一的框架，其中通过估计光流来指导连续输入帧之间中间帧的生成。本文提出一种新型的统一金字塔递归网络——UPR-Net，用于帧插值任务。UPR-Net采用灵活的金字塔架构，利用轻量级的递归模块实现双向光流估计与中间帧合成。在每一金字塔层级上，网络利用估计的双向光流生成前向变形表示，以支持帧合成；而在不同金字塔层级之间，则实现了对光流与中间帧的迭代优化。特别地，我们证明了所提出的迭代合成策略能显著提升帧插值在大运动场景下的鲁棒性。尽管模型极为轻量化（仅170万参数），UPR-Net的基础版本在多个基准测试中均表现出卓越的性能。UPR-Net系列的代码及训练好的模型已开源，地址为：https://github.com/srcn-ivl/UPR-Net。