摘要
本发明实施例公开的一种基于深度学习的多任务机器人感知方法,采用基于图像的深度学习感知方法,与高成本的激光雷达感知方法相比大大节约了成本。本发明实施例在机器人系统算力有限的情况下,使用轻量高效网络,共享特征提取信息,实现人体姿态估计、目标检测和实例分割的多任务模型,提高了机器人的感知能力。其中,人体姿态估计可确定机器人周围是否有人,以及判断人运动的状态,例如脚部方向;目标检测可确定机器人周围是否有障碍物;实例分割可帮助机器人更好的定位,以及更好的处理障碍物遮挡问题。另外,本发明实施例中采用的网络,简化了全身关键点的姿态估计,提高了推理速度,且缓解了机器人鱼眼摄像头下存在人漏检的问题。
技术关键词
人体姿态估计
人体下半身
双任务模型
分支
标签
关键点
多任务
检测损失
数据
机器人
图像
搭建骨架
样本
平衡人体
实例分割网络
鱼眼摄像头
尺寸
系统为您推荐了相关专利信息
卷积网络模型
水位预测方法
地下水
时序特征
观测井
尺寸特征
铁路钢轨
深度学习模型
图像分割模型
图像识别模型
结构重构方法
表格
多尺度特征
计算机可执行指令
模型库