摘要
本申请公开了一种基于生成任务与多模态的事件分析方法、系统及装置,用于快速准确地把握事件发展走向。本申请方法包括:将多模态数据生成结构化事件信息,并得到事件关系;构建事件图谱;提取多模态特征,使用跨模态注意力机制得到多模态情感关系向量;基于预设图神经网络,并结合事件图谱得到情感特征向量;计算对比学习损失值,基于对比学习损失值得到目标情感特征;利用跨模态注意力机制生成目标事件图谱;提取关系特征,结合注意力权重和预设时间序列模型得到事件预测图谱;提取因果链条并推理,推理后得到触发条件和情绪因素;将事件预测图谱与目标事件图谱结合节点特征序列、触发条件以及情绪因素,得到事件分析结果。
技术关键词
多模态
节点特征
图谱
音频特征
注意力机制
事件分析方法
跨模态
时间序列模型
文本
样本
数据
情感特征
输入输出单元
关系
图像
链条
系统为您推荐了相关专利信息
融合特征
航空发动机燃烧室
寿命预测模型
寿命预测装置
典型关联分析