摘要
发明提供了一种基于重构双注意力网络的图文情感分析方法,本模型在视觉特征提取中使用ResNet50获取视觉特征,同时引入空间和通道重构卷积模块,对视觉特征空间和通道位置信息进行重构,对不同位置的关键信息进行融合,加强视觉特征提取。在文本特征提取中使用BERT模型获取文本特征表示,并使用双向门控循环单元关注低层次单词之间的上下文联系,进而增强文本语义特征。最后使用交互注意力机制关注模态间的特征交互,并进行视觉特征与文本特征融合,有效地缓解了图文双模型再特征融合阶段,不能很好的表示关键信息的问题。
技术关键词
重构模块
情感分析方法
文本
视觉特征提取
语义特征
网络特征
交互式特征
图文
交互注意力
BERT模型
原始图像数据
门控循环单元
图像特征提取
通道
多层次
系统为您推荐了相关专利信息
骨架特征
动作识别模型
识别模块
编码器
动作识别方法
智能组卷方法
人工智能技术
文本
知识点
图像特征向量