摘要
本发明公开了一种基于Transformer‑YOLO的驾驶员疲劳检测优化方法;包括如下步骤:数据采集、数据预处理、目标检测、关键区域特征提取、多模态特征融合及疲劳状态分类;该方法首先通过YOLOv11模型检测驾驶员视频流中的人脸及关键区域,包括眼部、嘴部和头部姿态;然后利用关键区域注意力Transformer模块(Key Region Attention,KRA)提取时空特征,结合多模态特征融合技术,将目标检测结果与时空特征进行拼接;最后通过分类器实现疲劳状态判定;本发明解决了传统Transformer在驾驶员面部关键区域(眼、口)特征建模中计算冗余、实时性不足的问题。
技术关键词
驾驶员疲劳检测
多模态特征融合
区域特征提取
直方图均衡化算法
疲劳状态判定
视频流
人脸
多层网络结构
注意力
分类器
融合特征
驾驶员面部
图像
定义
数据
坐标
时序特征
序列
系统为您推荐了相关专利信息
海洋温盐
海洋遥感数据
多模态特征融合
遥感预测方法
大语言模型
刀具磨损监测
刀具磨损预测模型
非线性映射关系
位移误差
机床主轴电机
深度强化学习
决策方法
执行矩阵乘法
网络
预测特征
动态授权方法
风险预测模型
画像模型
手术
医院信息系统
像素点
噪声干扰程度
直方图均衡化算法
特征值
分布方差