基于多模态模型的交通限速标志识别方法及驾驶辅助系统

本申请涉及一种基于多模态模型的交通限速标志识别方法及驾驶辅助系统，其中，基于多模态模型的交通限速标志识别方法包括：获取交通场景图像以及辅助信息；使用预训练的模型提取所述交通场景图像的图像特征信息以及所述辅助信息的语义信息；融合所述图像特征信息和所述语义信息，得到多模态特征信息；基于所述多模态特征信息，得到交通限速标志识别结果，所述交通限速标志识别结果包括显式限速、动态限速和隐式限速中的一种或者多种。本申请实现了多类型限速标志一次性识别，提高了限速标识和隐式限速标志的识别效果。