摘要
本发明公开了一种基于用户语音的机器人巡查方法及安全巡查机器人,其中,该基于用户语音的机器人巡查方法包括:根据预定区域内物品的位置信息生成三维地图;根据RGB图像与物品在三维地图中的坐标对预定区域内的物品设置标签并生成语义地图;对语音信息处理获取目标点标签,根据语义地图和目标点标签计算行动路线,获取目标点标签的图像信息,对用户终端进行答复。本发明通过根据预定区域位置信息和物品信息形成具有物品标签的语义地图,通过对获取的语音信息处理获取对应物品的标签和位置,从而依据语义地图移动至物品位置以实现基于用户语音的巡查工作,提升巡查机器人的巡查效率,便于人员第一时间获取到安全问题的相关信息。
技术关键词
巡查机器人
巡查方法
语义地图
热成像摄像头
大语言模型
区域内物品
标签
摄像组件
图像
信息处理
坐标系
语音收集器
无线信号收发器
三维激光雷达
区域位置信息
语义分割模型