摘要

我们提出了一种空间自适应归一化方法，这是一种简单但有效的层，能够在给定输入语义布局的情况下合成逼真的图像。以往的方法直接将语义布局作为输入馈送到深度网络中，然后通过卷积、归一化和非线性层的堆叠进行处理。我们发现这种方法存在不足，因为归一化层往往会“冲淡”语义信息。为了解决这一问题，我们建议使用输入布局通过一种空间自适应且可学习的变换来调节归一化层中的激活值。在多个具有挑战性的数据集上的实验表明，所提出的方法在视觉保真度和与输入布局的对齐方面均优于现有方法。最后，我们的模型允许用户同时控制语义和风格。代码可在 https://github.com/NVlabs/SPADE 获取。