多模态知识图谱的大模型处理方法、装置、设备及介质

本申请提供多模态知识图谱的大模型处理方法、装置、设备及介质，涉及人工智能技术领域。通过获取目标领域内的多模态样本数据，将不同模态样本数据进行关联，构建得到领域特定的多模态知识图谱，并基于多模态知识图谱生成高质量的多模态训练数据集，使得通用大语言模型能够获得深入的领域理解能力；再利用多模态训练数据集，对通用大语言模型进行微调，得到目标大语言模型，即利用多模态样本知识图谱中的结构信息和多模态关联信息，提升通用大语言模型对目标领域的理解、推理、问答和应用能力，帮助研发人员快速查询资料、分析数据、评估方案，支持更科学的决策。