一种基于RAG与知识图谱的多轮对话处理方法和系统

本发明属于人工智能技术领域，提供一种基于RAG与知识图谱的多轮对话处理方法和系统。该方法包括：根据专有知识图谱，对与用户问题相关联的实体进行检索识别，得到关联实体，以构建推理链路，并转换为推理文本序列；通过多模态大模型检索与用户问题相关的文本、图片、音频数据，得到相关多模态数据；将相关多模态数据、当前推理文本序列、用户问题与所生成的回答文本进行整合后作为模型输入，输入多模态大模型，得到模型回答；筛选出相关的多模态数据，以所筛选出的多模态数据作为上下文、待处理问题一起作为多模态大模型的模型输入，得到与待处理问题相对应的回答文本。本发明能在减少交互的同时，有效将用户意图与回答文本对齐。