3 个月前

ASM:用于高质量3D人脸建模的自适应皮肤模型

ASM:用于高质量3D人脸建模的自适应皮肤模型

摘要

参数化人脸模型与三维人脸重建的研究领域已得到广泛探索。然而,一个关键问题仍未解决:如何针对特定的重建场景对人脸模型进行定制化适配。我们认为,基于多视角未标定图像的重建任务需要具备更强表达能力的新模型。本研究将关注点从依赖数据的三维可变形模型(3DMM)转向一种较少被关注的人工设计的蒙皮模型。为此,我们提出自适应蒙皮模型(Adaptive Skinning Model, ASM),该模型通过更紧凑且完全可调的参数体系重新定义了传统蒙皮结构。大量实验表明,ASM在模型容量方面显著优于传统3DMM,同时具备模型体积小、易于适配新拓扑结构等优势。在佛罗伦萨MICC Coop多视角重建基准测试中,ASM实现了当前最优的重建性能。定量分析进一步验证了高容量模型对于充分挖掘多视角输入中丰富信息的重要性。此外,本模型引入了具有物理与语义意义的参数,可直接应用于真实场景,如游戏内角色的自动化生成。综上所述,本研究开辟了参数化人脸模型的新研究方向,为未来多视角三维人脸重建技术的发展提供了有力支持。

基准测试

基准方法指标
3d-face-reconstruction-on-florenceASM
RMSE Cooperative: 1.34
RMSE Indoor: 1.53
face-alignment-on-facescapeASM
NME: 0.21

用 AI 构建 AI

从想法到上线——通过免费 AI 协同编程、开箱即用的环境和市场最优价格的 GPU 加速您的 AI 开发

AI 协同编程
即用型 GPU
最优价格
立即开始

Hyper Newsletters

订阅我们的最新资讯
我们会在北京时间 每周一的上午九点 向您的邮箱投递本周内的最新更新
邮件发送服务由 MailChimp 提供
ASM:用于高质量3D人脸建模的自适应皮肤模型 | 论文 | HyperAI超神经