摘要
本发明公开了一种基于电信规范多模态知识图谱的图检索增强生成方法,属于多模态知识图谱技术领域。本发明先通过电信规范解析智能体,借助版面分析、OCR与LLM工具,解析PDF中的标题、文本、图片和表格;接着调用电信规范多模态抽取智能体,利用多模态大模型将从图片和表格中提取图表名称和描述信息;通过构建标题层级结构并从文本块中抽取三元组,构建包括标题、文本块、图片、表格及三元组的多模态、多层级、多粒度电信规范知识图谱;最后调用电信规范多粒度检索智能体,将知识图谱与大模型深度结合,解决了传统RAG无法多跳推理的问题以及缓解了大模型在问答过程中可能出现的幻觉问题。
技术关键词
电信
多模态
三元组
生成方法
层级
实体
文本
多智能体协同
广度优先搜索
关系
深度优先搜索
知识图谱技术
知识图谱构建
主题
节点
图像
生成表格
图片