一种基于跨模态充电桩维护知识库的诊断方法

本发明涉及一种基于跨模态充电桩维护知识库的诊断方法，涉及充电桩运维技术领域。本申请利用基于注意力的图像编码器、文本编码器和图神经网络处理跨模态的充电桩维护知识来构建跨模态充电桩维护知识库，跨模态充电桩维护知识库中的向量化的跨模态充电桩维护知识包含高维的跨模态语义编码和低维的图嵌入；在利用充电桩诊断查询进行诊断处理时，首先通过低维嵌入模型提取诊断查询中实体和关系的嵌入，利用诊断查询中实体和关系的嵌入与图嵌入的相似性匹配最相近的设定数量个目标图嵌入；获取与目标图嵌入匹配的跨模态语义编码；语言模型利用检索到的跨模态语义编码和诊断查询生成诊断处理方案，本申请支持小参数语言模型，兼顾准确性和效率。