摘要
本申请涉及智能驾驶技术领域,特别涉及一种基于稀疏实例引导的高效多模态融合检测方法及装置,包括:将目标场景中的至少一个点云体素特征转换为至少一个点云鸟瞰特征,将至少一个图像透视特征转换为至少一个图像鸟瞰特征;对至少一个点云鸟瞰特征中的关键位置进行采样,以获取稀疏实例点云特征,接着,以稀疏实例点云特征为引导,对至少一个目标图像鸟瞰特征中的关键位置进行采样,以获取稀疏图像特征,将稀疏实例点云特征和稀疏图像特征进行融合,以生成目标稀疏融合特征,由此,解决相关技术中融合检测方法依赖结构复杂、参数量大的复杂网络结构,造成计算复杂度高、融合过程效率低,降低了融合效果、准确性及实时性等问题。
技术关键词
融合检测方法
点云特征
深度分布特征
相机图像数据
融合特征
激光雷达点云数据
多模态
查询特征
像素点
智能驾驶技术
热力图
处理器
检测头
编码
稀疏特征
场景
计算机程序产品
拼接单元
系统为您推荐了相关专利信息
注意力机制
并行神经网络
时间卷积网络
混合网络
锂离子电池
动作识别模型
动作识别方法
多头注意力机制
融合特征
图像
超分辨率重建模型
光场图像超分辨率
图像超分辨率重建方法
融合特征提取
上采样
信号采集模块
心率监测设备
空间分布特征
融合脑电
现实眼镜