4 个月前

面部运动先验网络用于面部表情识别

面部运动先验网络用于面部表情识别

摘要

基于深度学习的面部表情识别(FER)在过去的几年中受到了广泛关注。现有的大多数基于深度学习的FER方法未能充分考虑领域知识,因此无法提取出具有代表性的特征。在本研究中,我们提出了一种新颖的FER框架,命名为面部运动先验网络(Facial Motion Prior Networks, FMPN)。特别地,我们引入了一个额外的分支来生成面部掩模,以便专注于面部肌肉活动区域。为了指导面部掩模的学习,我们建议通过使用中性面孔与相应表情面孔之间的平均差异作为训练指导来整合先验领域知识。在三个面部表情基准数据集上的大量实验表明,所提出的方法相比现有最先进方法的有效性。

代码仓库

WhiTExB3AR/Emotion_Diary
pytorch
GitHub 中提及
donydchen/FMPN-FER
官方
pytorch
GitHub 中提及
WhiTExB3AR/PreProduceCode-FMPN-FER
pytorch
GitHub 中提及
tarun-98/COMP8240_Project_GroupG
pytorch
GitHub 中提及

基准测试

基准方法指标
facial-expression-recognition-on-affectnetFacial Motion Prior Network
Accuracy (7 emotion): 61.52
facial-expression-recognition-on-mmiFacial Motion Prior Network
Accuracy: 82.74%

用 AI 构建 AI

从想法到上线——通过免费 AI 协同编程、开箱即用的环境和市场最优价格的 GPU 加速您的 AI 开发

AI 协同编程
即用型 GPU
最优价格
立即开始

Hyper Newsletters

订阅我们的最新资讯
我们会在北京时间 每周一的上午九点 向您的邮箱投递本周内的最新更新
邮件发送服务由 MailChimp 提供
面部运动先验网络用于面部表情识别 | 论文 | HyperAI超神经