摘要
本发明涉及一种基于思维链和背景知识的多模态情感分析方法及系统,该方法包括:构建包含原始文本、相关图像、方面项及其情感极性的样本集合;构建多模态情感分析模型,其利用视觉语言大模型,结合输入文本和图像生成背景知识信息;并对生成的背景知识进行筛选优化、融合;对于样本集合中的每个样本,结合文本数据和情感极性,生成思维链思考过程并添加到样本集合中,再通过添加了思维链思考过程的样本集合,微调视觉语言大模型;最后,将融合背景知识、文本数据和图片数据依次输入训练好的视觉语言大模型,提取文本数据中的方面,并预测该方面对应的情感极性。该方法及系统有利于提高多模态情感极性分析的准确性。
技术关键词
文本
情感分析方法
样本
情感分析模型
图像
图片
编码器
数据
预训练模型
信息熵
随机梯度下降
注意力机制
计算机程序指令
关系
多模态
视觉
矩阵
情感分析系统
参数
系统为您推荐了相关专利信息
波纹夹芯结构
克里金模型
可靠性评估方法
变量
应力
新生儿脑损伤
最佳特征子集
样本
特征提取模块
机器学习模型
心肌梗死患者
xgboost模型
预测装置
多层堆栈
机器学习框架