摘要
本发明提供了一种基于机器视觉的采摘机器人人机交互系统及方法,方法包括自动识别步骤:获取果树的三维信息并自动识别出待采果实与果树枝条,计算得到待采果实的三维坐标;采摘步骤:根据待采果实的三维坐标为四自由度机械臂规划采摘路径,使用所述四自由度机械臂采摘果实;人机遥操作采摘步骤:当系统自动识别失败或规划采摘路径失败时,使所述计算机控制模块切换至人机交互模式,在此模式下辅助操作人员操作四自由度机械臂采摘果实。本发明提供的系统结合了自动识别规划与人机遥操作交互系统,能够完成对简易场景以及复杂状况场景下果实的采摘,在具备较高灵活性的同时还显著提高了果实采摘的成功率。
技术关键词
四自由度机械臂
采摘机器人
人机交互方法
人体姿态识别
人机交互系统
深度相机
三维图像信息
果实
人体图像信息
人机交互模式
果树枝条
视觉
机械臂关节
模块
坐标
旋转关节
语义分割算法
系统为您推荐了相关专利信息
机器视觉装置
综合控制系统
北斗定位装置
采摘机器人
北斗定位器
扰动观测器
臂控制方法
机器人
人机交互系统
观测误差
元素
视觉
人机交互界面
人机交互方法
运动轨迹变化