摘要
本发明公开了一种多模态道路感知方法、系统、终端设备及存储介质,方法包括:将获取的视觉信息、热成像信息、交通信息以及三维空间信息,映射到同一坐标系下进行坐标系对齐,得到目标视觉信息、目标热成像信息、目标交通信息以及目标三维空间信息;然后进行特征提取并分类,得到目标视觉信息所对应的第一感知结果、目标热成像信息所对应的第二感知结果、目标交通信息所对应的第三感知结果以及目标三维空间信息所对应的第四感知结果;根据第一感知结果、第二感知结果、第三感知结果以及第四感知结果,计算得到待感知道路的感知结果,对多模态道路信息进行坐标系对齐后整合,提高道路感知信息的全面性,实现多模态道路信息感知。
技术关键词
三维空间信息
坐标系
多模态
视觉
交通
基准
样本
雷达
热成像传感器
可读存储介质
终端设备
序列
图像像素
矩阵
特征提取模块
分类器
计算机
对齐模块
感知系统
系统为您推荐了相关专利信息
城市轨道交通优化
城市轨道交通列车
仿真模型
高速铁路运输系统
城市轨道交通乘客
多模态生理
门控循环单元
融合网络结构
人脸
心率