摘要
本申请公开了一种基于数字表亲与MR的煤矿机器人动作级规划装置及方法,涉及人机混合增强智能技术领域。通过信息数据获取模块获取场景信息数据;数字表亲场景信息确定模块确定数字表亲场景信息;动作数据确定模块将数字表亲场景信息输入至模仿学习模型,得到动作数据;然后,动作预规划模块根据动作数据确定动作预规划结果;调整模块采用多模态交互的方法,对动作预规划结果进行调整,得到调整规划结果;时空推演模块采用预设的动作规划算法对调整规划结果进行处理,并按照时间维度进行时空推演,得到时空推演结果;动作规划模块根据时空推演结果确定动作规划结果。本申请旨在提高动作规划效率以及适应性。
技术关键词
煤矿机器人
多模态交互
场景
规划算法
子模块
数据获取模块
煤矿井下作业
三维位置信息
语义
点云
地形结构
机械臂
资产
大语言模型
作业对象
作业工具
仿真环境