一种基于多模态融合的围栏跨越行为检测方法

本发明涉及一种基于多模态融合的围栏跨越行为检测方法，首先通过语义分割算法模块判断视频中人是否与围栏重叠，借此判断人是否接触了围栏，然后利用单目深度估计算法模块获取人与围栏之间的距离信息，接着利用异常行为检测算法模块分析当前人的行为是否偏离正常模式，最后融合上述三种算法模块的检测结果，综合判断人是否正在跨越围栏；本发明利用了多种信息源，包括语义、深度、行为等，能够更全面、准确地判断跨越行为，同时本方法仅依靠单目摄像头即可实现，部署和维护的成本更低，对遮挡、角度等复杂场景更加适用，能够捕捉到一些细微的异常行为，实现了在复杂环境下高效、稳定地检测围栏跨越行为的全天候自动化监测。