多模态知识图谱多跳推理方法、系统、终端及存储介质

本发明公开了一种多模态知识图谱多跳推理方法、系统、终端及存储介质，其中方法包括：为多模态知识图谱中的实体和关系生成结构嵌入、类别嵌入和描述嵌入，并将三种嵌入进行融合以得到多模态嵌入；构建结构数据智能体、类别数据智能体和描述数据智能体；以多模态知识图谱作为智能体交互的环境，采用基于MAPF的强化学习框架使三个智能体与环境交互进行迭代学习，得到训练完的三个智能体的策略网络；基于查询请求使用训练完的三个智能体的策略网络在多模态知识图谱中进行推理预测。本发明通过将不同模态的数据进行融合，并利用多个智能体协作并分别探索知识图谱中的不同推理路径，能够在复杂场景中快速做出合理的推理决策，找到最佳推理路径。