基于多模态的遥感多任务目标检测方法及装置

本申请涉及一种基于多模态的遥感多任务目标检测方法及装置。所述方法包括：构建遥感多任务目标检测模型；遥感多任务目标检测模型包括参数共享图像编码器、多任务头网络和动态调整模块；参数共享图像编码器包括网络层、卷积层和带有网格级稀疏混合专家网络的图像编码器；将多个模态的遥感图像输入参数共享图像编码器进行图像编码，得到输出特征；将输出特征输入多任务头网络中进行目标检测，计算目标检过程中每个任务的损失，在动态调整模块以任务的损失为目标动态调整每个任务头的学习率实现对遥感多任务目标检测模型的收敛速度与方向一致性的优化，利用优化后的遥感多任务目标检测模型实现多任务目标检测。采用本方法能够提高多目标检测效率。