摘要
本发明公开了一种基于Ultra‑VLN网络的机器人导航控制系统,属于自然语言处理、机器人技术、传感器技术领域,包括:1、采集单元分别获取环境图像、人类语音指令、机器人当前姿态;2、处理单元将人类语音指令转化为目标地点位置坐标,再分别对人类语音指令、环境图像、机器人姿态进行编码,得到编码序列后并输入到Ultra‑VLN网络;3、Ultra‑VLN网络对所述编码序列进行解码,并根据标地点位置坐标生成最优的机器人动作序列;4、计算单元会计算机器人执行所述动作序列所耗费的代价;5、控制单元控制机器人执行所述生成的动作序列。本发明能够有效提高机器人在复杂场景中响应人类任务指令并执行自主作业的效率。
技术关键词
导航控制系统
障碍物
处理单元
卷积特征
注意力
采集单元
姿态特征
控制单元
深度传感器
惯性传感器
文本
序列
网络
图像
移动底座
预测机器人
控制策略
指令
人类
系统为您推荐了相关专利信息
身份识别方法
深度网络模型
动物
特征数据库
度量
集成学习算法
全景视频流
VR设备
综合评估模型
沉浸式视频
多模态深度学习
多任务
融合特征
文本
图像数据预处理
智能管理方法
视频流
现场管理终端
生成资源
坐标
小麦冠层
机器视觉智能
灰度共生矩阵
深度森林模型
诊断方法