一种基于多模态融合视觉终端的车辆碰撞检测方法

本发明公开了一种基于多模态融合视觉终端的车辆碰撞检测方法，包括S1：解析设备端实时上传的轨迹数据包，获取既定时长、预定维度的车辆运动参数；S2：采集触发轨迹数据包预定时间窗口的音视频数据、解码既定时长的音视频信息；S3：对解析出来各个模态参数进行数据预处理，构造单模态碰撞检测维度的特征集，并进行特征筛选；S4：对传感器陀螺仪和音视频多模态特征进行融合；S5：基于多模态特征构建多模态细分场景，并采用决策树算法构建车辆碰撞检测的推送规则。本发明通过融合传感器采集的三轴加速度、音频与视频数据进行建模，实现了对车辆碰撞进行基于多模态数据的协同性、互补性检测。