摘要
本发明公开了一种基于跨模态递进式融合的多光谱行人检测方法,属于目标检测技术领域,该方法具体包括如下步骤:步骤1,构建行人检测网络:整个多光谱行人检测网络包括:双分支特征提取、模态特征增强、跨模态特征融合和检测模块四部分;本发明采用双分支多光谱行人检测网络,以成对的可见光与红外图像作为输入;通过多尺度特征聚合块提取图像的多层次特征,并利用模态质量感知增强模块提升各模态特征的表达能力;通过跨模态递进式特征融合模块对可见光和红外特征进行阶段递进的融合和强化,使网络能够充分利用两种模态的互补优势;本发明在多光谱行人检测任务中展现出优异的性能,各项指标均表现出显著提升。
技术关键词
行人检测方法
行人检测网络
跨模态
模态特征
可见光
多尺度特征
多光谱
行人检测模型
模块
分支
多层次特征
注意力
上采样
图像
多层感知机
数据
融合特征
指标
系统为您推荐了相关专利信息
车辆行人检测方法
公交站台
行人检测模型
通道注意力机制
卷积模块
数据分类分级
文本分类模型
样本
跨模态
预测类别
相机外参标定方法
语义标签
特征识别算法
车载激光雷达
车辆