摘要
本申请提供了一种基于VLN大模型的厨房服务机器人操作方法,涉及智能机器人技术领域,包括:基于双目摄像头与深度传感器实时获取环境信息,以构建三维环境模型;对获取的用户自然语言指令分解为子任务序列,根据环境信息评估对子任务序列的影响,以得到分解评估结果;基于三维环境模型和分解评估结果,规划机械臂运动路径;基于物品特性确定抓取参数,以调整机械臂的接触刚度与抓取力度;基于机械臂抓取物品实时得到的反馈信息,结合环境信息,以调整机械臂的执行状态。
技术关键词
三维环境模型
机械臂运动路径
深度传感器
双目摄像头
自然语言
服务机器人
抓取物品
机械臂末端执行器
厨房
参数
光照补偿算法
刚度
序列
规划
环境光照条件
智能机器人技术
关节
系统为您推荐了相关专利信息
极限学习机
文本分析模型
多头注意力机制
分类器
因子
情绪识别方法
情绪识别模型
多模态辅助
自然语言
韵律特征
自然语言文本
注意力
多模态特征融合
语句
预训练语言模型
视频制作系统
字幕
分析模块
输入模块
协同过滤算法