摘要
本发明涉及自动驾驶相关技术领域,尤其涉及动态场景下基于RGB与事件相机融合的目标检测算法,包括以下步骤:基于光流估计的事件矫正模块(ECM)。该动态场景下基于RGB与事件相机融合的目标检测算法,该通过融合RGB图像和事件相机的优势,提出了基于光流估计的事件矫正模块(ECM),联合训练优化事件特征表示,设计了事件特征动态上采样模块(EDUM),自适应调整上采样核并抑制噪声,提出了跨模态mamba融合模块(CMM),实现模态间特征交互与全局信息提取,提升特征融合效果,实验表明,本发明在DSEC和PKU‑DAVIS‑SOD数据集上显著优于现有方法,具有更高的检测精度和鲁棒性适用于自动驾驶等动态场景下的目标检测任务。
技术关键词
事件相机
事件特征
动态场景
上采样
特征金字塔网络
RGB特征
全局平均池化
算法
矫正
注意力机制
融合多尺度特征
特征分布信息
模块
多尺度特征融合
事件流
生成高分辨率
双线性插值法
跨模态
检测头
系统为您推荐了相关专利信息
身份
输出特征
数据分析方法
多尺度网络
投影特征
注意力
雷达辐射源信号
池化特征
上采样
图像语义分割网络
特征提取器
模态特征
检测解码器
融合特征
动态融合方法