基于多模态信息的车牌字符识别方法、系统以及储存介质

本发明公开了基于多模态信息的车牌字符识别方法、系统以及储存介质，涉及图像识别技术领域，对车牌图像预处理后输入到已训练完成的深度神经网络模型中，以输出车牌识别结果；深度神经网络模型包括预测模块、学生模型和教师模型，通过知识蒸馏技术把教师模型的多模态特征传递给学生模型，以完成车牌字符的识别；所述教师模型的输入为车牌图像和车牌描述文字，车牌图像通过视觉编码器微调后与车牌描述文字进行跨模态注意力融合，获取具有文本特征信息的车牌图像视觉特征；所述学生模型的输入为车牌图像，车牌图像通过特征提取后得到高层特征图；该车牌字符识别方法、系统以及储存介质识别结果更加准确，鲁棒性更高。