一种面向AGV末端作业的深度视觉识别与定位方法

本发明公开了一种面向AGV末端作业的深度视觉识别与定位方法，具体涉及AGV技术领域，包括将像素坐标系与叉车的深度相机坐标系进行映射，对深度相机的外参标定；获取当前车体中心在世界坐标系下位姿，利用深度相机捕捉RGB‑D/I R图像，对RGB或I R图像中的托盘进行检测和分割，定位到托盘腿部特征点及中线点像素坐标；关联托盘相关深度信息，计算托盘在世界坐标系中的坐标，计算出托盘的姿态；安装设计的局部路径规划算法形成局部路径，完成末端作业。本发明公开了从RGB/I R图像到AGV末端作业时的托盘识别算法流程；利用托盘检测算法和托盘孔检测算法以及通过预训练的红外图像识别神经网络模型，完成基于红外和RGB图像识别的托盘检测和分割。