摘要
本发明涉及一种基于语义增强与上下文交互的多模态情感分析方法及系统。方法中,提取得到文本模态特征、音频模态特征和视频模态特征,并由这三者构建模态特征数据集;该模型包括语义信息增强模块、图信息网络、关系图卷积网络、图形变换器和情感预测模块;将模态特征数据集输入多模态情感分析模型,并采用损失函数结合L2正则化方法,对多模态情感分析模型联合训练;最后对待分析视频文件进行特征提取后,将提取结果输入训练后的多模态情感分析模型,输出情感标签,以此作为情感分析结果。与现有技术相比,本发明具有表达情感全面、精准等优点。
技术关键词
情感分析方法
情感分析模型
图形变换器
多头注意力机制
语义
正则化方法
多模态特征
关系
节点特征
特征提取单元
集成特征
文本
情感分析系统
标签
音频
视频
邻居
系统为您推荐了相关专利信息
贡献率
烟叶状态
信息采集单元
烘烤方法
数据处理单元
审核模型
摘要
多智能体模型
计算机程序产品
数据处理技术