摘要
本申请公开了一种机械臂控制方法、装置、设备及存储介质,涉及智能控制技术领域,公开了机械臂控制方法,包括:获取语音信息和图像信息;基于大语言模型对语音信息和图像信息进行分析,得到机械臂的抓取任务目标信息;根据抓取任务目标信息得到机械臂抓取位姿;基于机械臂抓取位姿控制器控制机械臂完成抓取任务,该方法通过大语言模型分析获取的外界语音信息和环境图像,理解语音信息和环境图像中相匹配的目标,根据匹配目标在图像的位置自动生成抓取任务,充分利用大语言模型来处理任务输入信息,识别任务目标生成抓取任务信息,提高了抓取任务的成功率,拓宽任务场景。
技术关键词
机械臂控制方法
手眼标定
逆运动学
大语言模型
位姿控制器
机械臂控制装置
坐标
深度信息提取
语音
图像
矩阵
机械臂控制设备
抓取动作
关键词
机械臂基座
控制模块
智能控制技术
分析模块
系统为您推荐了相关专利信息
检测模型训练方法
解码网络
视频特征提取
异常事件
视频异常检测方法
大语言模型
意图
浏览器插件
多媒体
统一资源定位符