摘要
本发明公开了一种基于多模态预训练的车辆重识别方法、装置、设备及产品,所述方法包括获取目标车辆的车辆数据;其中,所述车辆数据至少包括所述目标车辆的车辆图像数据或文本描述信息中的一种;采用训练好的多模态车辆重识别模型,对所述车辆数据进行特征提取,得到所述车辆数据的最终特征,根据所述最终特征输出所述目标车辆的信息;其中,所述训练好的多模态车辆重识别模型包括预训练好的视觉变换器模型、预训练文生图模型和视觉变换器主网络。能够支持多种查询方式和文本信息嵌入,提高对图像文本信息的捕捉和对图像语义的理解,通过预训练增强提取特征的鲁棒性和辨别性,从而提高车辆重识别的性能。
技术关键词
车辆重识别模型
车辆图像数据
重识别方法
变换器
视觉
多模态信息
图像文本信息
计算机程序产品
识别模型训练
词嵌入向量
网络
数据获取模块
处理器
样本
系统为您推荐了相关专利信息
储能变换器
统一控制方法
直流微电网
储能单元
观测器
视点规划方法
深度强化学习
采摘机器人
ROI图像
深度相机
数据融合方法
多模态特征融合
融合特征
计算机可读指令
文本