摘要
本发明涉及跨模态数据技术领域,具体公开了一种跨模态数据视频检索与告警方法,包括以下步骤:步骤S1:设定关键词,并划分为正常关键词与异常关键词;获取关键词的图像数据,建立关键词特征库;步骤S2:获取关键词的行为样本视频流,并划分为异常行为视频流和常规行为视频流,并根据行为样本视频流,训练得到行为识别模型;步骤S3:对用户上传的视频流进行分析,如果在图像帧中识别出待分析关键词,并且该关键词被标记为异常关键词,则直接提示视频流中存在异常;如果识别出的关键词是常规关键词,则获取视频段,使用行为识别模型来识别这个视频段是否为异常行为视频流;统计告警量。
技术关键词
跨模态数据
告警方法
关键词特征
提示视频流
卷积神经网络模型
视频段
图像识别技术识别
样本
自然语言
语义
场景
动物
标记