一种基于区域感知的自适应多模态人群计数方法及系统

本发明提供一种基于区域感知的自适应多模态人群计数方法及系统，方法包括获取人群图像数据集并配对获得配准后的多模态图像；根据数据集中训练集的多模态图像提取不同特征层级的输出特征；将提取到的输出特征进行特征融合得到针对每个特征层级的融合图像，拼接生成最终的各模态各特征层级的最终融合图像；根据可见光图像得到各个模态的权重系数以对各个模态的源图像进行相加得到融合源图像；计算融合源图像与最终融合图像的区域感知损失和纹理损失及计数损失得到模型的总损失，根据总损失进行训练模型得到训练后的多模态人群计数模型；根据训练后的多模态人群计数模型预测人数及人群分布。本申请解决了融合模态及策略单一、融合质量不高的问题。