基于多模态模型的零售店门头照片对比模型的训练方法

本申请提供了一种基于多模态模型的零售店门头照片对比模型的训练方法，涉及零售行业图像处理技术领域。该方法对预设的多模态模型进行微调训练，并在微调训练时插入门头区域位置和内容对应的第一权重、门头周围固定区域位置和内容对应的第二权重，障碍物区域位置和内容对应的第三权重，得到微调训练后的零售店门头照片对比模型，使得微调训练后的零售店门头照片对比模型能够将注意力集中在门头区域位置和内容、门头周围固定区域位置和内容，并忽略掉干扰物，如行人、车辆或其他对象，从而能够减少预处理步骤，降低门头照片对比的成本，提高对比准确率。