一种基于ResPrompt与双交叉注意力的驾驶员分心检测方法

本发明公开了一种基于ResPrompt与双交叉注意力的驾驶员分心检测方法，将驾驶员分心行为的正/侧面视角图像输入线性嵌入模块和ResPrompt模块，线性嵌入模块对图像进行分块并生成特征向量，ResPrompt模块生成图像的提示向量；利用Swin‑Transfomer模块对正/侧面视角图像的特征向量和最匹配的提示向量进行多尺度特征提取，生成的每个视角特征；利用双交叉注意力模块融合双视角特征，并输入融合中心损失的分类器，对特征进行行为检测，生成最终的检测结果。本发明方法能有效提升了检测的准确性和鲁棒性，为半自动和自动驾驶车辆的安全运营提供了可靠的技术支持。