一种基于文本辅助的可见光红外行人重识别方法

本发明提出了一种基于文本辅助的可见光红外行人重识别方法。所述方法包括：获取待检索红外行人图像和可见光行人图像库，对红外行人图像标注粗略文本描述；对红外行人图像和可见光行人图像进行预处理；构建非对称双分支跨模态特征提取器，引入文本描述作为辅助信息，提取待检索行人图像和图像库所有行人图像的特征；计算两者的余弦相似度，将相似度从高到低排序，生成初始检索序列；计算图像库中行人图像之间的相似度，据此生成近邻集合；计算近邻相似度，据此对初始检索序列进行重排序。本发明通过引入文本描述作为跨模态检索辅助信息，并设计跨模态检索重排序算法，能够很好地解决跨模态行人特征对齐问题，因而获得了较现有方法更准确的行人重识别结果。