一种智能工厂语音与视觉协同控制方法及系统

本发明涉及工业自动化与机器视觉技术领域，尤其涉及一种智能工厂语音与视觉协同控制方法及系统，本发明中通过多目标识别模型结合物体特征点提取算法确定目标物的抓取难度倾向类型，根据目标物的抓取难度倾向类型以及目标物的形状复杂程度确定针对目标物抓取姿态的计算子参数，进而根据该计算子参数确定机械臂的抓取位姿，通过预设唤醒词实现免接触式控制，操作人员可通过自然语言处理指令快速启动抓取流程，显著减少传统按钮或触摸屏操作的时间延迟，语音指令与视觉采集无缝衔接，避免人工确认环节，提升系统响应速度，对于抓取难度较大的目标物通过多角度坐标计算模式提升抓取成功率。