基于多模态知识图谱的葡萄病虫害自动问答系统

本发明属于知识图谱技术领域，公开了一种基于多模态知识图谱的葡萄病虫害自动问答系统，包括：数据收集处理模块、知识图谱构建模块、主控模块、命名实体识别模块、文本分类模型模块、多模态融合模块、知识图谱存储模块、实体匹配模块、查询评估模块；构建葡萄病虫害领域的多模态知识图谱；本发明系统分析葡萄病虫害数据的特征，研究葡萄病虫害知识的结构化表达与整合方法，并构建了葡萄病虫害多模态知识图谱本体概念框架，为相关知识的统一管理与高效利用提供支撑；针对知识图谱构建过程中实体之间存在层级或嵌套关系的情况，利用全局归一化的思路来进行命名实体识别(NER)。对不同模态的数据采用实体链接技术，构建葡萄病虫害多模态知识图谱。