摘要
本发明公开了一种基于雷达与视觉融合的目标检测方法及系统,方法包括步骤:S1、获取图像数据和雷达点云数据;S2、将各数据进行处理得到K个视觉目标的2D检测候选框和N个雷达目标的3D检测候选框;S3、将各特征矩阵经过扩维网络映射到某一预设维度空间中,得到扩维后的2D特征向量和3D特征向量;S4、将扩维后的2D特征向量和3D特征向量分别进行编码操作,得到2D编码信息张量和3D编码信息张量;S5、将2D编码信息张量和3D编码信息张量进行拼接,得到整体的编码信息张量C;S6、对C进行解码操作,得到解码信息张量T;S7、对T进行MLP操作,得到目标检测结果。本发明具有检测精度高等优点。
技术关键词
雷达点云数据
多头注意力机制
解码信息
编码
视觉
前馈神经网络
矩阵
计算机程序产品
处理器
参数
检测器
可读存储介质
图像
存储器
系统为您推荐了相关专利信息
图像语义分割方法
混合编码器
道路病害识别
解码器
原始图像数据
工业机器人
玻璃表面镀膜
多模态数据融合
决策
数字孪生模型
大语言模型
RPA方法
自然语言
财务
前端技术栈