摘要
本发明属于多模态数据融合识别技术领域,设计了一种光电‑雷达时空协同的脉冲路由识别方法,实现了对多模态数据的高效融合与利用,达到了在模态部分缺失或受干扰时仍能准确识别目标的效果。与现有方法相比,该方法可以应用于模态缺失的情况,适用场景更广。时序‑空间联合嵌入专用于光电和雷达数据的时空对齐特征提取处理,对于雷达数据的特征提取能力更强,有利于多模态数据融合识别任务。同时,本发明引入了门控路由动态选择机制,可以明确从缺失模态数据中学习到鲁棒特征,推理阶段通过门控选择性添加缺失模态掩码提升结果的可解释性。
技术关键词
光电
识别方法
ResNet网络
雷达航迹数据
多模态数据融合
可见光
交叉注意力机制
脉冲
特征提取能力
红外专用
雷达专用
嵌入专用
编码器
坐标系
非线性
融合特征
系统为您推荐了相关专利信息
金属零部件
缺陷识别方法
图像处理技术
表面纹理特征
多角度
串联电弧故障识别方法
监测点实时监测
电压
波形畸变率
低压
船舶管件
多维特征向量
云端
动态权重分配
模型训练模块
光学遥感相机
去模糊图像
深度学习模型
成像
自动调焦方法