摘要
一种基于三维语义地图与大语言模型的机器人导航方法,包括以下步骤:将导航任务分解为高层规划目标、中层规划目标和底层执行目标三个层次;定义高层规划目标为确定目标区域;通过三维语义地图与导航任务的协同分析,选择目标区域;定义中层规划目标为规划行进路径;根据目标区域的二维地图,通过SPFA算法得到行进路径;定义底层执行目标为根据行进路径,控制机器人完成行进动作;获取机器人周围环境图像的点云数据,通过3D卷积神经网络从点云数据中提取出场景级全局特征,通过特征金字塔网络提取出物体级细粒度特征;融合形成统一的多尺度特征;通过大语言模型对多尺度特征进行语义理解与解析,动态生成三个层次的导航任务的具体导航指令。
技术关键词
三维语义地图
机器人导航方法
机器人动力学模型
细粒度特征
规划行进路径
语义向量
特征金字塔网络
多尺度特征
大语言模型
障碍物位置信息
语义标签
指数衰减函数
动态权重分配
定义
物体
编码
系统为您推荐了相关专利信息
细粒度特征
情感识别方法
深度神经网络
上下文感知网络
分支
机器人导航系统
机器人导航方法
激光测距仪
种植层架
机器人本体
图像生成模型
多模态
文本
生成图像集合
大语言模型
机器人机械臂
传感器控制器
信号处理模块
转矩控制系统
滑模观测器