多模态感知的多机械臂协同控制方法、系统及机器人

本发明公开了一种多模态感知的多机械臂协同控制方法、系统及机器人，通过根据目标任务的功耗、路径要求进行任务类型判断；根据所述任务类型进行模块选择；实时采集物料位置、物料形状、障碍物位置、障碍物形状等数据；融合所述感知模块采集的实时数据，确定机械臂运动路径、运动速度、运动加速度、抓取姿态及抓取力度；储存本次执行数据和任务反馈信息，分析操作效果，并优化下一任务的模态选择和参数设置；通过3D视觉、2D视觉和指令集多模态感知和数据融合，不断优化机器人运动路径，实时整合多源数据，提高了物料识别和状态描述的准确性与鲁棒性。