摘要
本发明公开了一种基于多模态数据的驾驶人分心程度实时评估与干预方法,涉及驾驶安全技术领域,包括采集驾驶人生理数据、眼动数据以及车辆状态这三个模态的数据,利用Transformer编码模块提取深度特征;将所有n个时间步的特征标量输入到动态模态融合模块计算出每个时间步下驾驶人注意力程度分值DAI;利用权重法计算n个时间步内驾驶人DAI的均值,确定当前驾驶人的分心程度并进行干预;通过引入动态模态融合模块和注意力机制,根据不同的驾驶情境和驾驶人的生理反应,实时调整各模态数据的权重,确保在驾驶过程中,各种模态数据能够根据其重要性和实时变化对最终的注意力评估结果产生恰当的影响。
技术关键词
干预方法
多模态
时间门控
眼动数据
主成分分析降维
动态
主成分分析方法
注意力机制
编码模块
滑动窗口
模态传感器
生理反应
加速度
方向盘
信噪比
系统为您推荐了相关专利信息
智能工业机器人
光刻系统
多模态数据融合
多传感器融合技术
强化学习算法
多模态
图像标注系统
图像标注方法
视觉特征
大语言模型
智能协同控制系统
可折叠显示面板
波束成形
矩形麦克风阵列
动态资源管理
辅助训练系统
压力传感阵列
模拟单元
多模态
流量复合传感器