摘要
本发明涉及数据处理技术领域,公开了一种桌面级多任务机械臂控制方法及相关装置,包括:通过视觉识别模块从捕捉到的二维图像中检测并定位目标物体的目标三维坐标信息;通过自然语言处理模块的语音识别子模块,将目标任务对应的语音信息转录为目标文本信息,通过自然语言处理模块的意图识别子模块,从目标文本信息中提取用户意图,并生成相应的目标任务指令;通过控制中心模块对来自视觉识别模块的三维坐标信息和来自自然语言处理模块的目标任务指令进行机械臂路径规划,生成目标控制命令;采用机械臂模块,根据目标控制命令,控制每个关节执行目标控制命令对应的机械臂操作,可以提升桌面级机器人在复杂任务处理方面和人机交互方面的准确性。
技术关键词
三维坐标信息
机械臂控制方法
桌面级
自然语言
识别模块
多任务
机械臂控制装置
控制中心
边框特征
图像
子模块
多尺度特征
机械臂控制系统
视觉
命令
语音
卷积特征
深度相机