基于多源双语及跨模态特征融合与增强的中文情感分类方法

本发明公开了基于多源双语及跨模态特征融合与增强的中文情感分类方法，属于情感计算技术领域，具体地：获取待分类中文文本并翻译；获取待分类图像的图像中文文本并翻译；构建双语特征提取模型，利用其分别提取待分类中文文本和图像中文文本的双语融合特征；提取待分类图像的全局视觉情感语义表示；构建情感知识库，对待分类中文文本的双语融合特征搜索处理得到外部情感表示；通过待分类图像的跨模态注意力融合，增强待分类中文文本的双语融合特征，基于所得跨模态情感表示预测情感分类结果。本发明通过充分挖掘用户发表的中英混合文本和配图的特征，有效捕捉不同来源的强情感表达词汇，显著提升中文情感分类任务的准确性，并兼顾模型计算效率。