数据生成任务处理方法、应用偏好数据的模型训练方法

本说明书实施例提供数据生成任务处理方法、应用偏好数据的模型训练方法，其中，数据生成任务处理方法包括：获取数据生成任务的任务数据，其中，任务数据包括样本图像、针对样本图像的样本问题、样本问题的答案标签；基于样本图像生成对应的噪声图像，并基于噪声图像生成样本问题的候选答案；基于样本问题的答案标签和候选答案，构造样本问题的偏好数据，将偏好数据作为数据生成任务的生成结果。候选答案是基于噪声图像获得，大概率与基于样本图像生成的答案标签不同，能够高效采样到样本问题的负样本，构造对应的偏好数据，极大降低了偏好数据构建的经济和时间成本，提高了偏好数据的构造效率，为大规模对齐训练提供了数据基础。