摘要
本发明涉及自然语言处理技术领域,具体为一种融合知识图谱的水库应急预案大语言模型审查方法。该方法获取待审查水库应急预案,并进行数据结构化处理;利用第一神经网络模型结合多尺度上下文感知机制,全面捕捉局部和全局语义信息,构建水库应急预案文本的知识图谱表征;采用第二神经网络模型处理图表型信息,构建水库应急预案多模态知识图谱;同时采用对比学习对Transformer架构的开源大语言模型进行微调,构建专用的水库应急预案大语言模型,并通过双向强化机制实现语言模型语义嵌入与知识图谱结构表示的互补增强。最后,结合图注意力机制将多模态知识图谱嵌入至微调后的大语言模型中进行综合审查,并生成审查报告。
技术关键词
融合知识图谱
大语言模型
水库
神经网络模型
实体
注意力机制
多模态
文本
多尺度语义特征
上下文语义信息
图表
关系
核心
三元组
概念
语义结构