摘要
本发明提供了一种情感识别方法及装置,涉及数据处理技术领域。该方法包括:根据已获取的用于情感识别的多模态数据进行特征提取,得到多种特征向量;对多种特征向量进行特征融合,得到融合特征,并采用第一预设分类器对融合特征进行情感分类,得到情感识别结果;或,采用第二预设分类器对多种特征向量进行情感分类,得到各特征向量对应的分类结果,并对所有特征向量对应的分类结果进行融合,得到情感识别结果。本发明基于多模态数据进行情感识别,通过对多模态数据进行特征提取、融合和分类,以实现多种类型数据的综合利用,能够更为全面地考量相应个体的情感,弥补单一模态数据的局限性,提升对相应个体情感识别的准确性、全面性。
技术关键词
情感识别方法
融合特征
文本情感分类
文本分类器
文本特征向量
语音
表情特征
图像
情感识别装置
多模态
多头注意力机制
音频
特征提取单元
数据处理技术
视频