图像篡改检测大模型训练方法及电子设备

本申请公开了一种图像篡改检测大模型训练方法及电子设备，图像篡改检测大模型包括：大语言模型、视觉编码器、分割解码器、视觉文本映射器、分类层和定位结构；在预训练阶段，冻结大语言模型、视觉编码器以及视觉文本映射器的参数，通过带有篡改分类信息和篡改定位结果的样本数据训练分割解码器、分类层和定位结构的参数；在分类训练阶段，冻结大语言模型和视觉编码器的参数，将样本数据转化成带有篡改分类结果和篡改定位特征的文本信息，训练分割解码器、视觉文本映射器、分类层和定位结构的参数；在任务训练阶段，解冻图像篡改检测大模型的全局结构，通过带有篡改分类结果的样本数据微调图像篡改检测大模型的所有参数。