一种基于多模态融合的端侧语义导航方法及系统

本发明公开了一种基于多模态融合的端侧语义导航方法及系统，所述方法包括：感知单元获取导航所需的实时环境感知数据和用户原始指令；端侧处理单元获取动态语义地图数据集和机器人实时位姿，接收感知单元发送的实时环境感知数据和用户原始指令，并根据实时环境感知数据、用户原始指令、动态语义地图数据集和机器人实时位姿生成规划路径；执行单元接收端侧处理单元发送的所述规划路径，根据规划路径执行任务，并得到任务执行结果。本发明在计算和存储资源受限的端侧设备上，能够高效、精确且鲁棒地处理多样化的导航指令，完成了复杂、动态的真实环境中的精确导航任务，显著提升了端侧导航的效率、准确性与任务适应能力。