基于深度学习的多模态情感识别方法及系统

本申请涉及模式识别技术领域，具体涉及基于深度学习的多模态情感识别方法及系统，该方法包括：获取已知各情感标签的各情感场景的各模态数据，各模态包括文本、视频、音频；提取各情感场景下的文本特征、视频特征、音频特征；确定各情感场景的面部表情丰富度、音频复杂度、文本情感一致度；基于所述面部表情丰富度、所述音频复杂度、所述文本情感一致度，分别对各情感场景下的视频特征、音频特征、文本特征进行加权，结合深度学习模型进行训练，得到情感识别结果。从而提高了情感识别的准确度。