少数类别样本敏感度提升的多模态情感分析方法及系统

本发明公开了少数类别样本敏感度提升的多模态情感分析方法及系统，涉及自然语言处理、计算机视觉和语音处理技术领域，所述方法包括：步骤S1、获取多模态数据的初始模态特征；步骤S2、使用特征提取适配器将所述初始模态特征转化为高级模态特征；步骤S3、使用情感极性、强度编码器提取所述高级模态特征的情感极性向量和情感强度向量；步骤S4、将所述情感极性向量和所述情感强度向量进行融合，得到多模态整体情感；步骤S5、使用损失函数对所述多模态整体情感进行数据增强，得到多模态整体情感向量；步骤S6、基于所述多模态整体情感向量得到多模态数据的情感分析结果。