摘要
一种多模态目标检测方法、多模态目标检测装置、介质及电子设备,涉及图像处理领域。该多模态目标检测方法包括:获取同一场景的红外图像和可见光图像;将所述红外图像和可见光图像输入多模态目标检测模型,所述多模态目标检测模型包括双流特征提取模块、上下文引导金字塔网络、预测模块,双流特征提取模块包括两个处理流,分别从红外图像与可见光图像中提取不同尺度的特征图;上下文引导金字塔网络从大尺度到小尺度将特征图进行特征融合,得到融合特征图;预测模块用于确定融合特征图中目标所在的预测框。
技术关键词
融合特征
可见光图像
特征提取模块
金字塔网络
多模态
跨模态
空间金字塔
双模态
电子设备
注意力
分支
图像采集模块
残差模块
处理器
场景
图像处理
可读存储介质
系统为您推荐了相关专利信息
音频分类方法
特征提取模块
音频波形数据
重构模块
音频分类装置
闸瓦
机器视觉分析
厚度测量方法
可见光图像
点云
智能问答方法
多模态
注意力机制
文本编码器
词典
漏洞
映射算法
补丁函数
生成补丁
PageRank算法