一种多模态图像融合识别方法、装置、介质及设备

本发明涉及图像融合以及分类技术领域，公开了一种多模态图像融合识别方法、装置、介质及设备。所述方法包括：获取不同类别的多模态图像；对多模态图像分别利用卷积层进行浅层特征提取，再进行特征融合得到浅层融合特征；对浅层融合特征进行全局特征提取，得到全局特征；将所述浅层融合特征与所述全局特征进行特征融合得到深层融合特征；对深层融合特征进行局部特征提取，得到局部特征；对所述局部特征进行全连接处理，识别得到多模态图像的类别标签。应用本发明可以实现掌纹掌静脉多模态图像的融合识别，提高公开数据集和残缺数据集上的识别准确率和等误差率。