一种多模态情感分析方法和系统

本发明公开了一种多模态情感分析方法和系统，涉及情感分析技术领域，方法包括：对多模态情感数据进行特征提取的文本单模态特征、音频单模态特征和视觉单模态特征进行模态反馈交互，生成文本反馈特征、音频反馈特征和视觉反馈特征；通过语言编码器和非语言编码器对文本反馈特征、音频反馈特征和视觉反馈特征进行编码，确定文本反馈特征以及音频编码特征与视觉编码特征拼接的混合编码特征；采用文本编码特征和混合编码特征进行特征筛选交互，确定文本筛选特征、混合筛选特征和交叉筛选特征；基于文本筛选特征、混合筛选特征和交叉筛选特征输出情感分析结果。基于上述方案，可以防止信息混杂和模态间的干扰，有助于提高情感分析可靠性。