摘要
本发明公开一种无人驾驶中环境信息获取方法和装置、系统、存储介质,包括:获取双目相机采集的RGB图像和激光雷达采集的点云数据;将RGB图像输入到立体匹配网络中,得到双目立体图像数据;立体匹配网络包含:具有水平‑垂直交叉注意力的特征提取层、多头交叉注意力差分连接聚合模块和迭代细化感知全局聚合模块;将点云数据和双目立体图像数据输入到基于三分支金字塔嫁接网络中,得到无人驾驶汽车的周围环境信息;基于三分支金字塔嫁接网络包括:基于注意力机制的跨模型移植模块、Swin Transformer分支网络、Mobilev3分支网络和Xception分支网络。采用本发明技术方案,可以获取高精度、高鲁棒性的深度图像。
技术关键词
环境信息获取方法
双目立体图像
注意力机制
分支
网络
周围环境信息
信息获取装置
无人驾驶汽车
金字塔
双目相机
模块
激光雷达
信息获取系统
纹理特征
数据
语义
处理器
风格
系统为您推荐了相关专利信息
软体机器人
恢复控制方法
模型预测控制框架
网络
传感
智能变电站仿真
模型构建方法
场景测试系统
无线控制主机
智能电子设备
人体肌电信号
机器学习模型
步态识别
计算机可读指令
人工神经网络模型
锂电池容量估计
特征提取器
数据归一化方法
一维卷积神经网络
双向长短期记忆
航空发动机气路
融合神经网络
脉冲
多模态特征融合
图像格式转换