摘要
本发明公开了多模态移动分拣机器人的导航方法及分拣系统,涉及机器人导航技术领域,在分拣区域内的光线波动超过预期时,在待分拣物品抵达预定位置前触发图像采集机制;将采集的听觉数据及视觉数据融合后提取多模态特征,依据多模态特征对待分拣物品进行识别;分别由视觉数据及听觉数据对待分拣物品进行定位后,若两个位置数据间的偏差程度超过预期,对待分拣物品的位置数据进行修正;由待分拣物品信息生成分拣值,以分拣值及实时位置对待分拣物品进行标记后,为分拣机器人规划移动至待分拣物品处的移动路径;使用多模态数据对待分拣物品进行识别和定位。
技术关键词
移动分拣机器人
导航方法
多模态特征
物品图像数据
听觉
分拣系统
偏差
光电传感器
电子地图
实时位置
图像采集装置
机械臂末端执行器
机器人导航技术
物品识别模型
视觉
麦克风阵列采集
节点