摘要
本申请公开了一种面向粮食生产的跨模态知识获取与智能问答方法及设备,涉及人工智能领域,该方法包括:基于粮食生产场景下的元集数据及网络数据集进行跨模态知识发现,构建粗粒度多模态知识库;所述元集数据包括多种模态的数据及对应的标注信息;基于所述粗粒度多模态知识库进行跨模态知识获取,生成多模态数据对,并进行跨模态实体链接,构建细粒度多模态知识图谱;根据用户输入的问题,基于所述细粒度多模态知识图谱,生成答案。本申请提高了粮食生产场景中多模态数据的处理效果和智能问答的准确性。
技术关键词
多模态
智能问答方法
跨模态
文本
自然语言
实体链接模型
图谱
视频
预训练语言模型
词性预测
视觉特征
生成答案
语言编码器
数据
图像特征向量
关键词
嵌入特征
系统为您推荐了相关专利信息
注意力神经网络
试卷结构
注意力模型
图片
节点特征
突发事件数据
停车设施
电子围栏
生成结构化数据
需求预测模型
语音控制方法
LED显示屏
文本
音频特征
数据格式
法律知识图谱
教育系统
强化学习代理
手势识别单元
更新知识图谱