一种多模态知识图谱构建方法及装置

本申请实施例提供一种多模态知识图谱构建方法及装置，包括：获取具有关联关系的图像和文本；对所述图像和文本进行特征提取，得到图像特征和文本特征；将所述图像特征和文本特征输入预先构建的知识图谱模型，利用所述知识图谱模型基于训练得到的提示向量对所述图像特征和文本特征进行多模态融合处理，得到多模态融合特征；基于所述多模态融合特征，识别多个实体及实体间的关联关系，确定多模态知识图谱的三元组。本申请通过持续学习、多模态融合与提示学习相结合的方法，优化多模态知识图谱的构建过程，适用于动态变化的知识图谱场景，能够有效提升知识图谱构建任务的性能。