摘要
本发明公开了一种跨模态自蒸馏的RGB与红外行人重识别方法及系统,该方法包括:获取行人可见光图像与行人红外图像并进行图像数据预处理,得到行人可见光模态特定特征与行人红外模态特定特征;引入跨层语义蒸馏模块与层内对齐蒸馏模块,构建跨模态自蒸馏网络模型;基于跨模态自蒸馏网络模型对行人可见光模态特定特征与行人红外模态特定特征进行跨模态行人重识别,得到可见光与红外跨模态行人重识别结果。本发明能够将跨模态融合的判别性知识转移到拥有较弱判别能力的模态特征中,从而增强跨模态模型的整体判别能力。本发明作为一种跨模态自蒸馏的RGB与红外行人重识别方法及系统,可广泛应用于图像融合技术领域。
技术关键词
跨模态
蒸馏
重识别方法
可见光图像
残差网络
图像数据预处理
语义
分块特征
冗余特征
模块
教师
特征提取器
行人重识别系统
学生
图像融合技术
通道注意力机制
系统为您推荐了相关专利信息
数据存证方法
医学
数据平台
数据存证系统
存证信息
深度残差网络模型
编码图像块
像素点
捕获机构
操作系统
点云语义分割方法
电力走廊
激光点云数据
三维点云数据
无人机
电力通信设备
故障诊断方法
多模态
故障分类器
融合特征