基于特征解耦重构策略的多模态融合目标检测方法及系统

本发明提供一种基于特征解耦重构策略的多模态融合目标检测方法及系统，属于目标检测技术领域，获取待检测目标的第一模态图像和第二模态图像；利用预先训练好的目标检测模型对获取的第一模态图像和第二模态图像进行处理，得到最终的多模态融合目标检测结果。本发明将特征融合方案解耦为语义、深度、空间和通道四种维度上进行跨模态交互，实现高质量和高效率的不同模态融合增强；提出的语义融合注意力、门控深度融合机制、空间聚合和通道聚合策略实现了在减少模型计算量加速推理速度的前提下高效结合了模态互补特征以及模态专属特征。有效地提高了受限环境下目标检测的精度、推理速度与鲁棒性。