摘要
我们提出了一种从语义布局合成摄影图像的半参数方法。该方法结合了参数化和非参数化技术的互补优势。非参数化部分是一个由训练图像集构建的图像片段存储库。在测试时，给定一个新的语义布局，存储库用于检索作为深度网络源材料的摄影参考。合成过程由一个利用所提供摄影材料的深度网络完成。在多个语义分割数据集上的实验表明，所提出的这种方法生成的图像比最近的纯参数化技术更加逼真。结果展示在补充视频中，链接为：https://youtu.be/U4Q98lenGLQ
代码仓库
xjqicuhk/SIMS
官方
tf
基准测试
| 基准 | 方法 | 指标 |
|---|---|---|
| image-to-image-translation-on-ade20k-outdoor | SIMS | Accuracy: 74.7% FID: 67.7 mIoU: 13.1 |
| image-to-image-translation-on-cityscapes | SIMS | FID: 49.7 Per-pixel Accuracy: 75.5% mIoU: 47.2 |