一种基于多模态信号监测的驾驶员状态评估方法及系统

本发明涉及车辆技术领域，公开了一种基于多模态信号监测的驾驶员状态评估方法、系统、电子设备、存储介质及车辆，包括实时采集驾驶员的多模态信号，其中，所述多模态信号包括视频信号、音频信号、心电信号以及车辆状态信号；对所述多模态信号进行预处理，并进行关键特征提取，得到多模态特征，其中，所述多模态特征包括驾驶员以及驾驶行为特征；将所述多模态特征进行融合，得到融合特征，其中，所述融合特征用于描述驾驶员状态；将所述融合特征输入到预设的模型中，以划分驾驶员的异常状态，当所述异常状态超过预设条件时，对所述驾驶员进行相应提醒。本发明可多维度的检测驾驶员状态，提升状态评估的准确性，并可相应进行提醒，保障驾驶安全。