一种基于多模态正交融合的目标识别方法及设备

本发明提供一种基于多模态正交融合的目标识别方法及设备，涉及图像融合领域，包括：通过样本图像集合构建可见光图像集合和红外图像集合；对可见光图像集合和红外图像集合进行目标标注，分别获得可见光目标图像集合和红外目标图像集合；通过标注后的数据库对改进YOLOv8目标检测模型进行预训练，获得预训练的改进YOLOv8目标检测模型；通过可见光目标图像集合和红外目标图像集合对预训练的改进YOLOv8目标检测模型进行进一步训练，获得训练好的改进YOLOv8目标检测模型。本发明通过确保每个模态为融合过程提供独特且非冗余的信息，以利用多模态数据的全部潜力，最终提高目标识别的精确度。