重庆理工大学学报（自然科学）

重庆理工大学学报（自然科学） ›› 2021, Vol. 35 ›› Issue (8): 144-150.doi: 10.3969/j.issn.1674-8425(z).2021.08.019

• 信息·计算机 • 上一篇    下一篇

人脸特征和脉搏信号特征的视频情绪识别

牛 锦，王 峰，宋剑桥，魏 祥，师泽州，刘泽坤   

  1. 太原理工大学 信息与计算机学院，太原 ０３００２４
  • 收稿日期:2019-08-20 发布日期:2021-09-19
  • 作者简介:牛锦，男，硕士研究生，主要从事图像处理和情绪识别研究，Ｅｍａｉｌ：６９１２１３２９１＠ｑｑ．ｃｏｍ；通讯作者 王峰，博士， 教授，主要从事图像处理和模式识别研究，Ｅｍａｉｌ：ｗａｎｇｆｅｎｇ＠ｔｙｕｔ．ｅｄｕ．ｃｎ。
  • 基金资助:
    山西省回国留学人员科研项目（２０１７－０４９）；空中交通管理系统与技术国家重点实验室开放基金项目 （ＳＫＬＡＴＭ２０１８０３）

  • Received:2019-08-20 Published:2021-09-19

PDF (PC)

385

赞

摘要： 针对当前视频情绪识别方法主要集中于对人脸表情的判读而忽略了面部生理信号 中所隐含的情绪，提出一种基于人脸特征和脉搏信号特征的视频情绪识别方法。该方法首先对 经过预处理的视频提取 ＬＢＰＴＯＰ人脸表情特征，然后通过色度模型从视频中提取脉搏信号，并 提取时域特征、频域特征及非线性特征，通过 ＣＣＡ算法融合 ２种特征，最终利用支持向量机完 成情绪的识别。在 ＣＡＳ（ＭＥ）２数据库进行实验，经过 ＣＣＡ融合特征后的情绪识别效果较 ＬＢＰ ＴＯＰ特征的单模态情绪识别效果高 ３．０４％，较基于脉搏信号特征的单模态情绪识别效果高 １３． ８５％，说明了该方法的优越性。

关键词: 情绪识别, 脉搏信号, 色度模型, 特征融合

中图分类号: 

  • TP391.4