用于模型训练的方法、装置、设备、存储介质和程序产品

本公开提供了用于模型训练的方法、装置、设备、存储介质和程序产品。方法包括：利用预训练数据集对机器学习模型执行预训练过程，以获得经预训练的机器学习模型，机器学习模型被配置为处理多模态查询请求并且生成针对多模态查询请求的应答；以及利用第一训练数据集对经预训练的机器学习模型执行第一微调阶段，以获得经微调的机器学习模型，第一微调阶段包括：将第一训练数据集划分为多个第一训练数据子集，每个第一训练数据子集中的训练样本包括样本图像、样本文本以及对应的应答标签，多个第一训练数据子集中的每个样本图像按不同尺寸被划分为多个图像块；利用多个第一训练数据子集来微调经预训练的机器学习模型，得到更新后的机器学习模型。