基于多模态自适应权重融合的全天候分心驾驶检测方法

本发明公开基于多模态自适应权重融合的全天候分心驾驶检测方法，构建包括光照权重调节网络和近红外光和可见光图像融合网络的基于多模态自适应权重融合的网络；通过光照权重调节网络可提取当前输入的可见光图像的光照似然特征值；按照输出的光照似然特征值归一化生成的融合权重，将可见光及近红外图像输入到图像融合网络后输出融合后图像；将打上分心驾驶标签的融合后的图像输入基于YoloV5的暗光增强网络模型，得到分心驾驶标签对应的驾驶行为状态；根据预设的分心驾驶条件得到该状态是否为分心驾驶。本发明将近红外光和可见光的优势结合来增强对驾驶员图像特征的信息提取能力，提高分心驾驶检测准确率，使其满足全天候下分心驾驶检测需求。