一种基于拒绝回答的多模态大语言模型问答方法

本发明提供一种基于拒绝回答的多模态大语言模型问答方法，方法包括：先对在问答任务下构建的问答数据集中的回答数据进行修改后，得到包括提问数据和拒绝回答数据的拒绝数据集，并对预训练的多模态大语言模型进行微调得到微调的多模态大语言模型。在预设的问答任务下，将多模态数据输入到微调的多模态大语言模型中，得到多模态数据在问答任务下的回答结果。本发明用以解决多模态大型语言模型在应对视觉领域的攻击时需要大量恶意数据训练模型来进行安全对齐的问题。