基于多模态知识图谱和大语言模型的故障诊断问答系统

本发明涉及本发明提供了一种基于多模态知识图谱和大语言模型的故障诊断问答系统，包括：时序数据处理模块，用于对时序数据进行降噪处理，对降噪后的时序数据进行特征提取，使用多个特征数据代表时序数据本体；多模态知识图谱模块，用于构建多模态知识图谱，包括文本模态知识图谱及时序数据模态知识图谱；大模型微调模块，用于基于不同的故障问题及其对应的解决方案，采用LoRA模型对大模型进行微调，以获得问答大模型；RAG问答模块，用于基于多模态知识图谱对用户问题进行增强处理，将增强后的语句输入微调后的大模型，输出结果。本发明提高了故障诊断的速度，实现了对多种数据类型进行故障问答，解决了大模型对专业领域知识缺乏的问题。