4 个月前

增强残差网络用于基于上下文的图像外扩填充

增强残差网络用于基于上下文的图像外扩填充

摘要

尽管人类在预测图像边界之外的内容方面表现出色,但深度模型在通过保留的信息理解上下文和外推方面仍面临挑战。这一任务被称为图像外扩(image outpainting),涉及生成图像边界的逼真扩展。目前的模型使用生成对抗网络来生成结果,但这些结果缺乏局部图像特征的一致性,显得不真实。我们提出了两种方法来改进这一问题:一是使用局部和全局判别器;二是在网络的编码部分添加残差块。我们的模型与基线模型的L1损失、均方误差(MSE)损失以及定性差异的对比显示,我们的模型能够自然地扩展物体边界,并生成比现有方法更具内部一致性的图像,但在图像保真度方面略逊一筹。

代码仓库

etarthur/Outpainting
官方
pytorch
GitHub 中提及

基准测试

基准方法指标
image-outpainting-on-places365-standardResidual Encoder
Adversarial: 0.0941
L1: 0.08
MSE: 0.7814

用 AI 构建 AI

从想法到上线——通过免费 AI 协同编程、开箱即用的环境和市场最优价格的 GPU 加速您的 AI 开发

AI 协同编程
即用型 GPU
最优价格
立即开始

Hyper Newsletters

订阅我们的最新资讯
我们会在北京时间 每周一的上午九点 向您的邮箱投递本周内的最新更新
邮件发送服务由 MailChimp 提供
增强残差网络用于基于上下文的图像外扩填充 | 论文 | HyperAI超神经