基于大模型的验证码识别方法、装置及相关设备

本发明实施例公开了基于大模型的验证码识别方法、装置及相关设备。该方法获取不同类型的样本验证码；对不同类型的样本验证码进行预处理，提取样本验证码的多模态特征；获取每一样本验证码的验证策略和干扰特征，并将每一多模态特征以及对应的验证策略和干扰特征输入初始多模态大模型进行识别训练，基于初始多模态大模型的输出结果和对应的真实验证码类型标识，根据三元组损失函数进行损失计算，得到模型损失，并根据模型损失进行反向传播，优化多模态大模型的模型参数，得到优化后的多模态大模型；获取当前所需识别的目标验证码，并将目标验证码输出所述多模态大模型进行识别，得到识别结果。该方法提升对跨类型验证码的识别准确度和成功率。