摘要
本发明涉及环境感知技术领域,公开了基于多光谱传感器的融合感知系统和方法。该方法获取可见光传感器、热成像传感器、毫米波雷达及激光雷达采集的异步异构环境数据流,涵盖多光谱波段的环境信息,实现对目标外观、温度、运动及几何特征的全面捕捉对异步异构数据执行时空配准操作,消除传感器间的时空偏差,生成时空同步的多源感知数据立方体,为后续融合提供一致数据基础。基于该数据立方体,采用分层特征融合架构提取跨光谱联合特征,生成多维特征张量,深入挖掘多源数据的内在关联与互补信息。通过动态加权决策机制处理多维特征张量,输出环境目标的三维态势感知图谱,适应环境动态变化与传感器数据波动,提升复杂场景下环境感知的可靠性。
技术关键词
多光谱传感器
热成像传感器
可见光传感器
数据立方体
分层特征
运动补偿算法
感知系统
运动轨迹预测
拓扑网络
异构
映射关系表
视频帧
激光雷达点云数据
数据采集模块
权重分配策略
环境感知技术