摘要
本发明涉及一种基于大模型的多模态事件抽取方法及系统,具体地,构建多模态事件抽取数据集,所述数据集包含文本数据和与所述文本数据对应的图像数据;对所述文本数据进行文本特征提取,并提取图像的场景信息;将提取的所述文本特征和所述场景信息进行融合得到多模态输入语料;利用事件抽取模型对所述多模态输入语料进行事件类型和触发词以及实体抽取;利用多模态大模型在所述图像中框出抽取的实体。
技术关键词
多模态
文本
数据
事件抽取方法
图像
实体
场景
事件抽取系统
自然语言
模板
图片
模块
对象
关系
系统为您推荐了相关专利信息
智能故障检测
电力通信网络故障
小波奇异性检测
网络拓扑模型
电力通信设备
交互检测方法
上下文特征
语义
YOLO算法
特征提取网络
代码漏洞检测方法
数据流特征
融合特征
风险评估模型
节点
物联网通信技术
数据分类
传感
数据采集模块
关系