摘要
本发明公开一种基于多模态交互与融合的多光谱目标检测方法,涉及自动驾驶多模态信息处理技术领域。该方法能够根据目标特性和环境变化实时优化融合效果,显著提高算法的检测精度,并满足实时处理和资源受限的应用需求,通过在融合前进行模态间的交互,补充各自缺失的信息,显著提升了跨模态特征融合的质量。采用细粒度特征整合,不仅提供了更加精确和丰富的局部特征,还逐步建立和增强了模态间的长程依赖关系,提升了多模态特征的全局一致性和表示能力。最后,该方法设计的轻量高效的交互与融合模块,具有更强的实用性,不仅适用于当前的目标检测任务,也能推广到遥感等其他领域的多光谱目标检测,具有广泛的适用性和扩展性。
技术关键词
模态特征
融合特征
多模态交互
可见光图像
跨模态
特征融合网络
分支
全局平均池化
模块
多尺度
通道
调节单元
层级
线性
像素点
系统为您推荐了相关专利信息
电机故障检测方法
深度神经网络模型
数据
振动特征
非线性特征
模态特征
融合特征
红外图像融合技术
双波段图像融合
二维快速傅里叶变换
生成方法
卷积解码器
音频特征
音频编码器
语义特征
神经网络均衡器
信号均衡方法
信道特征提取
序列
脉冲幅度调制系统