一种基于特征图划分与生成对抗网络的多模态融合目标检测方法

本发明公开了一种基于特征图划分与生成对抗网络的多模态融合目标检测方法，该方法包括：步骤1：获取用于图像融合和目标检测的红外和可见光两种模态的训练图像数据集和测试图像数据集，以及图像的标签文件；步骤2：将上述步骤1中得到的训练图像和标签文件输入融合检测网络进行训练；步骤3：目标检测：基于训练好的融合网络，输入测试的红外‑可见光图像对生成融合图像，将融合图像输入目标检测器进行目标检测。这种方法既强调图像中的显著性区域，也关注背景细节部分，从而在提高了显著性区域的目标检测准确度的同时，该方法还能够检测出背景中可能存在的遮挡和残缺目标。本发明可以显著提高多模态融合目标检测器的性能。