摘要
本发明涉及一种基于算力芯片的机械臂视觉控制系统,所述系统包括,S1,通过多路工业相机采集实际操作环境中的图像数据,得到初始数据集;S2,采用图像灰度化和去噪的方式对训练集进行预处理,得到目标数据集;S3,以YOLOv8目标检测模型为基准模型构建改进的YOLOv8目标检测模型作为机械臂视觉检测网络模型;S4,采用环境建模算法,训练集进行三维建模,构建运动路径;S5,将测试集送入所构建的系统中完成机械臂的抓取;通过视觉检测和三维建模的方法,对抓取物进行图像识别,精准获取目标三维位姿信息,再结合运动学模型进行精确运动规划,优化抓取轨迹,达到了有效提升抓取位置和角度的准确性的效果。
技术关键词
视觉控制系统
机械臂
特征金字塔网络
检测网络模型
激光雷达点云数据
训练集
建模算法
空间位置关系
芯片
融合点云数据
三维位置信息
工业相机
数字图像处理
抓取轨迹
权重机制
处理器
泊松方程