一种基于类脑多模态层次化感知的情绪识别方法

本发明涉及一种基于类脑多模态层次化感知的情绪识别方法，本发明从类脑感知角度出发，模仿人脑对感知信息层次化处理的特性，构建了可统一处理多模态情绪信息的类脑计算模型，能够模拟人类处理多模态输入信息。模型集成了类脑感知机制和机器学习。首先基于真实人脑感知特性完成语音、视觉和文本的深层特征提取；接着通过设计的多模态多头注意力机制完成信息融合；最后利用决策层实现情绪分析。实验结果表明，此方法四分类识别精度分别可达83.7％，具有较好的应用前景。