摘要
本发明公开一种多模态数据融合的弱光环境下行人目标识别方法,涉及智能车辆自动驾驶技术领域,以解决现有技术在弱光环境下目标检测效果不佳的问题。该方法包括:构建包含行人和车辆的交通场景数据库,数据库包括红外图像和可见光图像;将红外图像和可见光图像进行特征配准和时空对齐,并按比例划分为训练集、验证集和测试集;提供基于多模态数据融合的双分支目标检测网络,以训练集作为输入对双分支目标监测网络进行训练,得到适应弱光环境的DarkRGBT‑YOLO网络模型;将测试集输入至DarkRGBT‑YOLO网络模型中对目标进行检测,得到检测结果;根据检测结果对图像中的每个行人目标分析出位置风险得分和距离风险得分,将位置风险得分和距离风险得分相加得到总风险评估结果。
技术关键词
多模态数据融合
可见光图像
识别方法
风险
智能车辆自动驾驶
训练集
分支
模块
多尺度特征
网络
融合特征
金字塔
中心线
图像压缩
模态特征
注意力
交通
系统为您推荐了相关专利信息
手势识别模型
特征金字塔网络
手势识别方法
模块
预训练模型
信息提取模型
线下
识别方法
数据
计算机可读指令
双无人机协同
识别方法
轨迹特征
序列
动态时间规整
防火门
防火边界
监测控制终端
控制策略
远程控制器