摘要
本发明公开一种基于激光雷达与相机融合的多模态目标检测方法,涉及三维目标检测技术领域,包括以下步骤:基于统计的过曝区域像素掩码、基于权重归一化的通道加权融合、基于静态查找表的视图变换、基于多模态算法的模型量化、基于TensorRT的模型部署;本发明引入过曝区域像素掩码模块,有效抑制夜间图像中的过曝区域干扰,引入基于动态加权归一化的跨模态特征融合模块,实现多源数据的自适应特征融合,减少夜间图像中的不良特征对融合模型的影响,通过引入基于静态查找表的轻量化视图变换方法,有效降低视图变换模块的运行耗时与内存占用,且通过批归一化层折叠与低精度量化的协同优化策略对模型参数进行压缩,减少了模型的资源占用。
技术关键词
激光雷达
相机
模型压缩方法
模态特征
权重分配机制
索引
通道
直方图
多模态
模块
动态
网格
图像像素
融合特征
查找表
饱和度
数据
精度
系统为您推荐了相关专利信息
识别特征
语句
模态特征
情绪识别方法
情绪识别模型
车载采集设备
三维点云模型
激光雷达
三维缺陷检测方法
雅可比矩阵
接触网
光度
Retinex算法
BP神经网络
光照