摘要
本发明公开一种基于深度学习的多目标抓取方法及系统,属于计算机视觉与机器人控制技术领域,方法包括获取待抓取目标的图像以及深度信息,基于目标抓取检测模型得到抓取点的坐标,输入机械臂生成抓取指令抓取至少一个目标;其中,通过相机标定算法建立映射模型,改进YOLOv5网络和GRCNN网络构建目标检测模型和抓取点预测模型;目标抓取检测模型的数据处理方法包括将待抓取目标的图像以及深度信息,输入目标检测模型检测目标和抓取点预测模型确定抓取点,得到图像采集设备坐标系下的抓取点坐标,并基于映射模型转换为机械臂坐标系下的抓取点坐标。本发明解决了现有技术中存在的目标识别精度不足、抓取点计算不准确以及缺乏实时性的问题。
技术关键词
图像采集设备
机械臂坐标系
抓取方法
相机标定
分辨率
网络
数据传输模块
加权平均法
通信模块
数据处理方法
逆运动学
机械臂控制系统
抓取动作
像素
机器人控制技术
伺服驱动单元
系统为您推荐了相关专利信息
无人机视觉
追踪方法
追踪算法
飞控组件
图像采集设备
相机标定方法
相机外参
非线性优化算法
相机标定装置
关系
圆形筒仓
修复方法
环氧树脂砂浆
混凝土面层
除锈剂