基于人脸表情与生理信号的多模态情绪识别研究  

作　　者：胡鹏昊 黄正洋 罗小娟[1] 席国伟 政铁 曲慧莹 HU Penghao;HUANG Zhengyang;LUO Xiaojuan;XI Guowei;ZHENG Tie;QU Huiying

机构地区：[1]华东理工大学信息科学与工程学院,上海200000

出　　处：《信息技术与信息化》2023年第2期113-116,121,共5页Information Technology and Informatization

基　　金：大学生创新创业训练计划资助项目202110251056;国家自然科学基金面上项目61872143。

摘　　要：利用多模态智能技术识别情绪已成为业界研究热点。利用摄像头采集到的人脸图像信息传入已经训练好的模型之中,融合传感设备采集到的用户皮肤电反应和心电信息,提出采用支持向量机分类得到情绪所属的二维情绪模型位置,从而得出用户的准确情绪状态,提高了整体情绪识别、分类的准确率。算法对于人类基本情绪的识别准确率达到77.85%,高于单一模态识别的准确率,为多模态情绪识别研究提供了一种新的思路和探索。

关 键 词：情绪识别 多模态 支持向量机 

分 类 号：TN911.7[电子电信—通信与信息系统] TP391.41[电子电信—信息与通信工程] R395.1[自动化与计算机技术—计算机应用技术]