摘要
本发明公开一种基于深度学习的多目标抓取方法及系统,属于计算机视觉与机器人控制技术领域,方法包括获取待抓取目标的图像以及深度信息,基于目标抓取检测模型得到抓取点的坐标,输入机械臂生成抓取指令抓取至少一个目标;其中,通过相机标定算法建立映射模型,改进YOLOv5网络和GRCNN网络构建目标检测模型和抓取点预测模型;目标抓取检测模型的数据处理方法包括将待抓取目标的图像以及深度信息,输入目标检测模型检测目标和抓取点预测模型确定抓取点,得到图像采集设备坐标系下的抓取点坐标,并基于映射模型转换为机械臂坐标系下的抓取点坐标。本发明解决了现有技术中存在的目标识别精度不足、抓取点计算不准确以及缺乏实时性的问题。
技术关键词
图像采集设备
机械臂坐标系
抓取方法
相机标定
分辨率
网络
数据传输模块
加权平均法
通信模块
数据处理方法
逆运动学
机械臂控制系统
抓取动作
像素
机器人控制技术
伺服驱动单元
系统为您推荐了相关专利信息
三维重建系统标定方法
投影仪
坐标系
相机标定
雅可比矩阵
三维重建方法
轮廓图像数据
纹理模型
粗集料颗粒
图像获取系统
图像采集设备
多模态数据采集
硬件时间戳
控制设备
红外光栅
内阻
多元线性回归模型
多元回归模型
工况参数
电池健康状态评估