摘要
本申请属于智能情绪识别技术领域,公开一种方面级多模态情感分析方法、系统、设备及介质,所述方法包括:基于图像和文本,分别获取图像特征和文本特征,并通过池化操作选取方面词特征;通过图卷积神经网络分别对图像‑文本和图像‑方面词进行建模,得到图像‑文本交互特征和图像‑方面交互特征;以图像‑文本交互特征作为查询向量,图像‑方面交互特征作为键向量和值向量,并引入残差连接和归一化,得到交互特征并与方面词特征融合,基于融合特征进行情感分类。本申请从多模态特征提取、交互建模到融合优化,一系列操作层层递进,为情感分类提供全面、精准且优质的特征支持,最终有效提升方面级多模态情感分类的准确率与可靠性。
技术关键词
交互特征
词特征
融合特征
文本
图像
情感分析方法
线性变换矩阵
多头注意力机制
输出特征
特征提取模块
加权特征
情绪识别技术
情感分析系统
全局平均池化
存储计算机程序
序列
多层感知机
样本