摘要

我们提出了一种基于图像的方法ARCH++，用于重建具有任意服装风格的3D虚拟形象。我们的重建虚拟形象不仅在输入视角的可见区域，而且在不可见区域都具备动画制作能力和高度的真实性。尽管先前的研究展示了重建具有各种拓扑结构的可动画化着装人体的巨大潜力，但我们观察到存在一些根本性的局限性，导致重建质量欠佳。本文中，我们重新审视了基于图像的虚拟形象重建的主要步骤，并通过ARCH++解决了这些局限性。首先，我们引入了一种端到端的点基几何编码器，以更好地描述底层3D人体的语义特征，取代了之前的手工设计特征。其次，为了解决着装人体在标准姿态下因拓扑变化引起的占用模糊问题，我们提出了一种跨空间一致性协同监督框架，联合估计处于变形姿态和标准姿态下的占用情况。最后，我们利用图像到图像翻译网络进一步细化重建表面的几何细节和纹理，从而提高了不同视角下的保真度和一致性。实验结果表明，在公共基准测试和用户研究中，ARCH++在重建质量和真实性方面均优于现有最先进方法。