一种根据自适应权重进行多模态融合的目标检测方法

本发明涉及一种根据自适应权重进行多模态融合的目标检测方法，包括：获取红外相机和可见光相机拍摄的同一场景下的红外图像和可见光图像；同时将红外图像和可见光图像输入到预先训练好的目标检测模型中进行目标检测，得到目标检测结果；其中，目标检测模型包括骨干网络；骨干网络包括红外图像特征提取模块、可见光图像特征提取模块、自适应模态融合权重计算模块和跨模态特征交互模块；自适应模态融合权重计算模块包括第一独立模态权重计算模块、第二独立模态权重计算模块、偏置项计算模块和softmax层，从而能够解决现有技术中由于采用固定权重进行加权求和的方式导致的目标检测不精准的问题。