摘要
本发明实施例提供了机器人的控制方法、装置、设备、存储介质及程序产品,该方法包括:通过训练后的视觉规划器根据当前帧图像确定未来帧图像;其中,所述图像包括深度信息和RGB信息;通过训练后的状态编码器对所述当前帧图像以及未来帧图像依次进行编码以及特征提取,获得当前目标状态特征以及期望目标状态特征;确定所述当前目标状态特征以及期望目标状态特征的偏差;通过训练后的动作解码器对偏差进行解码,获得动作特征;根据动作特征对机器人进行控制,以使机器人执行动作特征对应的动作。本公开实施例,可以提高机器人的控制准确率。
技术关键词
状态编码器
动作特征
机器人
融合特征
RGB特征
图像编码器
图像训练样本
计算机可执行指令
多层感知器
规划
视觉
偏差
解码器
处理器
多模态
特征提取模块
计算机程序产品
系统为您推荐了相关专利信息
评分方法
数据
注意力机制
样本
非暂态计算机可读存储介质
小腿组件
人形机器人
切换机构
传动带组件
低速电机
开合装置
挡鼠板
传感器接口模块
门框
输出驱动模块
混凝土振捣
一体化装置
混凝土类
振动机构
机器人