摘要
本发明公开了一种基于图检索增强智能体的建筑电梯检测诊断决策方法,其包括:步骤1)、电梯检测数据准备和处理;步骤2)、知识抽取;步骤3)、知识融合;步骤4)、知识图谱可视化与优化;步骤5)、图检索增强生成;步骤6)、诊断决策智能体;本发明能够从结构化数据、文本数据和视觉数据等电梯检测领域多模态数据通过电梯检测技术规范引导多模态大模型提取三元组信息,基于预训练视觉‑语言模型自动对齐电梯检测视觉目标实体与文本命名实体,实现了较为精确、高效地生成电梯检测领域的多模态知识图谱,并且基于该多模态知识图谱,融合图检索增强技术进行建筑电梯检测智能诊断。
技术关键词
诊断决策方法
实体
图谱
大语言模型
数据
跨模态
三元组
关系
自然语言
多模态
建筑
语义
文本编码器
图像编码器
电梯结构
光学字符识别技术
节点
增量更新