基于语义感知互补特征挖掘的RGB-T计数方法及装置

本发明公开了基于语义感知互补特征挖掘的RGB‑T计数方法及装置，本发明首先对训练数据集中的图像进行预处理；然后构建基于语义感知互补特征挖掘的RGB‑T计数网络，包括基于Transformer的特征提取器、从粗到细的模态特征自适应方法和语义感知代理模块；所述基于Transformer的特征提取器用于提取两种不同模态图像的高级语义表示；所述从粗到细的模态特征自适应方法用于过滤噪声特征和挖掘精细的互补特征；所述语义感知代理模块用于增强网络输出和特征提取器中的语义一致性感知，并通过密度回归层预测密度图和计数结果。本发明可以高效完成RGB‑T人群计数任务，计数结果比现有技术更优。