摘要
本发明公开了一种分层机器人操作策略生成方法、装置及设备,生成方法包括:采集机器人的手眼相机图像与外部相机图像,并获取自然语言指令;将手眼相机图像与外部相机图像作为图像观测,并输入循环一致性变分自编码器得到语义特征与空间特征;生成新视角手眼相机图像,并与图像观测进行多视角融合,更新语义特征;将语义特征与自然语言指令输入基础技能判别器,生成机器人技能类别;将空间特征与机器人技能类别输入动作生成器,生成机器人动作。本发明涉及机器人智能控制与人工智能技术领域,能够显著提升了机器人在复杂、变化环境下执行长时序、多任务操作的成功率与可靠性,具有广阔的应用前景。
技术关键词
语义特征
策略生成方法
相机
生成机器人
自然语言
编码器
策略生成装置
多视角
分层
机器人操作过程
重构
机器人智能控制
指令获取单元
图像采集单元
终端设备
解码
系统为您推荐了相关专利信息
智能合约代码
自然语言
区块链智能合约
计算机执行指令
索引
自然语言查询方法
结构化业务数据
语句
大语言模型
语义
幕墙构件
三维扫描方法
面结构光
机械臂末端执行器
相机