基于自我问答的可信多模态大模型推理方法及装置

本发明提供一种基于自我问答的可信多模态大模型推理方法及装置，涉及人工智能技术领域，方法包括：获取多模态数据，并进行特征提取得到对应的多模态令牌特征；获取针对多模态数据的提问问题，将提问问题与多模态令牌特征输入到多模态大模型中进行第一问答；并将得到的第一回答文本以及提示词输入到多模态大模型进行第二问答，得到第二回答文本，确定第一回答文本与第二回答文本的相似度得分，当相似度得分大于相似度阈值时，将第一回答文本作为提问问题的回答文本。通过本申请，克服大语言模型在进行问答时过于依赖问答知识库，且生成的回答文本准确性和可信度低的缺陷。