面向垂域的多模态大模型优化方法

本发明公开了面向垂域的多模态大模型优化方法，包括：选择适用于目标垂域的目标多模态大模型；获取目标垂域的知识数据构建第一数据集；构建提示词模板用于引导第一大模型分别基于第一数据集和目标垂域的任务特征生成问答对集合；设定评价规则引导第二大模型对问答对集合中的问答对进行质量评价，筛选质量评价高于预设阈值的问答对构建目标问答对集合；将目标问答对集合作为对齐正样本，并基于目标问答对集合引导第三大模型生成对齐负样本，将对齐正样本和对齐负样本集合为对齐训练集；利用目标问答对集合完成目标大模型的监督式微调训练，利用对齐训练集完成目标大模型的对齐训练；重复上述步骤，完成目标大模型的迭代训练。