一种行人通行意图多模态预测方法及预测装置

本发明提供一种行人通行意图多模态预测方法及预测装置，应用于门禁监测技术领域，基于获取的图像信息，提取行人多模态特征，并通过决策逻辑判断是否允许当前行人通行，包括如下步骤：S1、获取进站行人图像序列，执行多目标检测与跟踪，标识每个行人ID，形成边界框序列；S2、针对每个行人，进行多模态特征提取，所述多模态特征包括刷卡动作、目光方向、跑步行为和行人类别；S3、将多模态特征处理后输入至决策模型中进行判断，以控制闸机状态。该行人通行意图多模态预测方法及预测装置，通过融合行人的目光方向、动作行为、手部刷卡动作以及人体特征等信息综合判断当前通行人员的通行意图，提高异常行为检测的准确性和及时性。