摘要
一种基于情感冲突自适应的多模态情感分析方法,包括如下步骤:构建单模态网络,获取单模态特征和用于表示跨模态情感一致性高低的情感冲突强度系数;单模态特征包括时序特征和全局特征;构建多模态网络;多模态网络包括用于解决情感一致问题的简单模块、用于解决情感冲突问题的困难模块和用于特征融合的对齐模块;对齐模块利用注意力机制将时序特征作为输入,输出融合特征;简单模块将融合特征和全局特征作为输入,输出简易模块预测输出;困难模块将融合特征和全局特征作为输入,输出困难模块预测输出;根据情感冲突强度系数自适应融合简单模块预测和困难模块预测,输出最终预测值;训练单模态网络和多模态网络,优化参数。
技术关键词
情感分析方法
融合特征
多模态网络
时序特征
Attention机制
模态特征
对齐模块
解码器
文本
多层感知机
跨模态
异性
注意力机制
矩阵
视觉
音频编码器
系统为您推荐了相关专利信息
CT影像数据
多模态特征
融合特征
智慧医疗技术
像素
三维人体姿态估计
骨架特征
特征提取方法
阶段
特征提取模型
早期检测方法
输出特征
网格搜索算法
特征选择方法
AdaBoost算法
边界特征
透明物体检测
语义特征
交叉注意力机制
融合特征