用于零件装配工序的视觉识别方法与系统

本申请涉及零件装配检测的技术领域，特别涉及一种用于零件装配工序的视觉识别方法与系统，该用于零件装配工序的视觉识别方法包括以下步骤：实时获取视频流、并进行解码预处理，生成连续的帧图像；识别帧图像中的手部区域与操作按钮区域，通过计算手部区域与操作按钮区域的交并比判断工序启动情况；基于分类模型对帧图像进行零件状态获取，通过多帧联合判断方法对零件状态进行识别、并与预设零件目标状态进行比对，判断每个零件状态的工序预期情况；当工序符合预期时，采用目标检测算法结合多帧联合技术进行遗留物识别；当工序预期情况不符或识别到遗留物时，输出告警。本申请具有使用成本低、且通用性和适应性强的优点。