基于多模态感知的导航控制系统、方法及智能移动设备

本发明公开一种基于多模态感知的导航控制系统、方法及智能移动设备，该系统包括：数据获取模块，用于获取导航环境和目标作业区的多模态数据，如激光点云数据、视觉数据和惯性导航数据；数据处理模块，用于对多模态数据进行补偿及同步处理；特征提取模块，用于基于补偿及同步处理后的数据执行特征提取与关联；导航控制模块，用于基于多模态因子对不同模态的特征进行跨模态融合，以获取地图点坐标和设备位姿，及基于地图点坐标、设备位姿和作业设备的运动模型生成导航规划路径。本发明通过多模态数据融合识别立体空间内的地图点坐标和设备位姿，能够实现立体空间内的实时定位、纠偏及避障，提高定位和导航精度，提高复杂场景下的物料取放精度。