摘要
本发明公开了一种基于天地特征融合的无人驾驶汽车车云协同广域感知方法及系统,包括:车端数据处理:通过PointPillars体柱化结合FPN‑ResNet骨干网络对激光雷达点云进行处理,生成BEV特征图,经检测头输出包含三维坐标、航向角等信息的目标检测结果,再利用AB3DMOT多目标跟踪算法将检测结果关联为轨迹合集,随后将BEV特征图、轨迹合集及车辆位姿信息打包压缩上传至云端;云端数据处理:云端接收数据后,先解压获得BEV特征图、轨迹合集和车辆位姿信息,然后进行特征融合和轨迹融合;车端将接受到的云端融合后的信息与自车当前时刻特征融合,并消除延迟,最终获得车云协同感知结果。本发明能够保障感知结果的实时性,为自动驾驶决策提供及时、准确的环境信息支撑。
技术关键词
无人驾驶汽车
轨迹
激光雷达点云
融合特征
多尺度特征金字塔
云端数据处理
线性变换矩阵
多头注意力机制
卡尔曼滤波器
高分辨率遥感卫星
匈牙利匹配算法
车辆
编码器
坐标系
语义
检测头