摘要
本发明涉及自主机器人决策系统技术领域,更具体地说,涉及一种基于多模态感知融合的自主机器人决策系统及其方法,包括:多模态数据采集模块,用于获得环境的多模态感知数据;数据预处理模块,与多模态数据采集模块相连,用于对多模态感知数据进行预处理;特征提取模块,与数据预处理模块相连,用于从预处理后的多模态感知数据中提取特征;动态时空图构建模块,与特征提取模块相连,用于基于特征构建动态时空图;多模态数据融合模块,与动态时空图构建模块相连,用于对动态时空图中的多模态数据进行融合;通过自适应时间对齐和跨模态空间注意力机制,系统能够有效处理不同传感器数据的时空不一致性,实现厘米级的定位精度。
技术关键词
多模态数据采集
自主机器人
多模态数据融合
特征提取模块
决策系统
特征提取单元
深度图数据
控制执行模块
动态
融合多模态信息
规划
点云特征提取
3D点云数据
视觉特征提取
深度特征提取
GPS接收器
系统为您推荐了相关专利信息
分级保护方法
元数据类型
语义特征
层级
数据访问权限
智能辅助决策系统
颌面外科手术
三维立体模型
矩阵
外科手术辅助
联控方法
门窗
时空卷积神经网络
建筑BIM模型
数据采集层
物流运输装备
迁移学习模型
故障诊断方法
拓扑特征
多任务学习模型
环境检测模型
风险
动态可视化
区域预测方法
时空数据模型