一种面向多模态方面级情感分析的特征增强方法

本发明涉及自然语言处理、情感分析技术领域，具体为一种面向多模态方面级情感分析的特征增强方法，其包括提取方面词的特征信息，提取出图像区域有效信息；利用三线性相似度算法与方面词匹配，利用注意力机制将匹配度最高的特征表示与方面词进行融合；获取文本的初步特征信息，再获取文本词汇的词性相关信息；构建指向方面词的句法依赖图，其次添加多头交叉注意力机制，依照方面词对文本特征加权；对原始图像进行规范处理，利用ResNet‑152进行图像特征的提取；将方面词与图像模态特征表示输入多头交叉注意力机制，对图像信息进行相关程度区分；针对包含方面词的图像和文本模态特征表示，利用拼接加权方式将图像中的方面词相关情感信息加入到最终的特征表示中。