一种基于动态光照感知随机掩膜的多模态目标检测方法

本发明公开了一种基于动态光照感知随机掩膜的多模态目标检测方法，涉及多模态目标检测领域，提出动态光照感知随机掩膜方法，对训练集部分比例图像进行掩膜处理，并考虑曝光和强光环境的影响，使网络无偏地学习多模态有效互补特征；构建双模态特征级融合目标检测基础网络；引入跨模态差分特征交互模块，通过提取可见光和红外模态之间的差异特征和在通道‑空间维度上动态分配注意力权重，增加双模态间的互补信息交互；展开模型训练和测试。本发明提供的多模态目标检测方法提高了多模态目标检测模型对曝光和强光等复杂光照环境的鲁棒性，提高了无人机平台/卫星平台的多模态遥感目标检测能力和复杂光照条件下的目标识别精度。