多模态行人识别系统及应用

本发明公开了一种多模态行人识别系统及应用，其中多模态行人识别系统包括任务共享学习模块、任务具体学习模块和识别模块；任务共享学习模块用于提取各模态图像的增强特征，任务具体学习模块通过自适应模态聚合模块挖掘不同模态图像间的关系，克服模态间的分歧形成模态互补形成多模态融合特征，识别模块通过多模态融合特征进行行人识别。该系统能够显著提高模态融合行人识别和跨模态行人识别。