摘要
本发明提供基于多传感器融合的机器人环境感知方法及系统,方法包括以下步骤:采集并融合当前环境的可见光图像和红外热成像,获得融合图像;基于融合图像,构建并训练图像语义网络分割模型,获得融合图像中的物体语义信息;采集外部环境点云数据,将物体语义信息逐像素点的投影到点云数据中,获得带有语义信息的点云数据;构建点云目标检测模型,对带有语义信息的点云数据进行目标检测,获得当前环境的信息。本发明技术方案能够使机器人对周围环境进行有效感知,提高了信息处理效率以及感知准确率。
技术关键词
机器人环境感知
多传感器融合
可见光图像
物体
剪切波
深度学习网络
数据
点云特征
像素点
区域建议网络
语义特征
全局特征提取
成像
标注工具
系统为您推荐了相关专利信息
全局地图
自动更新方法
机器人地图
动态更新
机器可读指令
工业相机
三维点云数据
视觉检测系统
工业主机
物体
切割深度调节
切割工具
轨迹
多传感器融合技术
结构生成算法
混合料含水率
冷再生混合料
调控系统
门控循环单元网络
多传感器融合
姿态检测方法
特征图像识别
注意力
可见光图像
网络