重庆理工大学学报（自然科学）

重庆理工大学学报（自然科学） ›› 2022, Vol. 36 ›› Issue (1): 151-158.

• 智能技术 • 上一篇    

基于卷积神经网络的三维动画表情生成及情感监督方法

庄美琪１ａ，谭小慧１ａ，１ｂ，樊亚春２，程厚森２   

  1. １．首都师范大学 ａ．信息工程学院；ｂ．交叉学科研究院； ２北京师范大学 人工智能学院
  • 发布日期:2022-02-13
  • 作者简介:庄美琪，女，硕士研究生，主要从事计算机图形图像研究

  • Published:2022-02-13

PDF (PC)

194

赞

摘要： 针对在线学习，提出一种三维动画表情生成方法，复现学生学习过程中的情感状态，同时对学生进行情感监督。将视频作为输入，通过卷积神经网络识别人脸动作单元，将识别结果作为驱动虚拟替身的数据使其面部发生形变从而生成表情；基于识别结果计算情感指数，进行可视化分析生成情感监督图表。研究得出：用户对提供的表情生成效果和情感指数符合程度的评分均值达到83.97。手动生成的表情同自动生成表情的对比实验证明:效果一致。最终呈现３种可视化结果（动画表情生成效果、情感指数波动图和情感指数分布图），为教师提供了具有学生隐私保护的情感监督和学习状态反馈。

关键词: 在线教学, 深度学习, 情感监督, 三维表情生成, 人脸动作单元

中图分类号: 

  • TP391.9