HyperAIHyperAI

Command Palette

Search for a command to run...

神经体拟合:统一深度学习和基于模型的人体姿态与形状估计

Mohamed Omran Christoph Lassner Gerard Pons-Moll Peter V. Gehler Bernt Schiele

摘要

直接预测三维人体姿态和形状仍然是一个挑战,即使对于高度参数化的深度学习模型也是如此。从二维图像空间映射到预测空间非常困难:透视模糊性使得损失函数变得嘈杂,而训练数据又十分稀缺。在本文中,我们提出了一种新颖的方法(神经体拟合(Neural Body Fitting, NBF))。该方法在卷积神经网络(CNN)中集成了统计体模型,利用可靠的自下而上的语义身体部位分割和稳健的自上而下的体模型约束。NBF完全可微分,并且可以使用二维和三维注释进行训练。通过详细的实验,我们分析了模型各组件对性能的影响,特别是将部分分割作为显式的中间表示的使用,并提出了一种鲁棒且高效可训练的框架,用于从二维图像中估计三维人体姿态,在标准基准测试中取得了具有竞争力的结果。代码将在 http://github.com/mohomran/neural_body_fitting 上提供。


用 AI 构建 AI

从创意到上线——通过免费 AI 协同编码、开箱即用的环境和最优惠的 GPU 价格,加速您的 AI 开发。

AI 协同编码
开箱即用的 GPU
最优定价

HyperAI Newsletters

订阅我们的最新资讯
我们会在北京时间 每周一的上午九点 向您的邮箱投递本周内的最新更新
邮件发送服务由 MailChimp 提供