一种数据中心机房人员物品多模态异常检测方法及系统

本发明提出一种数据中心机房人员物品多模态异常检测方法及系统，方法包括：记录门禁信息和登记信息，并周期性基于门禁触发和结束时间截取监控视频流；获取连续视频帧中目标人员的移动速度及人员轮廓变化，进行行为异常检测并报警；基于视频流采用黄线检测判断目标人员的出入行为，结合登记信息提取目标人员及携带物品，基于相似度进行一致性校验，若相似度低于设定阈值判定为出入异常并报警。通过融合门禁、登记及视频流等多模态信息，进行滞留异常、剧烈动作和形态异常的检测，并结合方向参数与登记信息校验一致性，克服单一检测弊端，全面提升机房人员物品管控的智能化程度。