摘要
本发明涉及视频异常检测技术领域,具体公开了一种基于外观语义和运动幅度的视频异常检测方法及系统,方法包括:获取待测视频帧的目标前景,得到图像编码特征;计算图像编码特征与训练建模的文本提示语义特征的相似度,通过最大相似度计算目标前景的外观异常分数;获取待测视频帧目标前景对应的光流图,将光流图输入训练好的自适应编码器获取编码特征,然后经过二分类器得到目标前景的运动异常分数;将目标前景的外观异常分数和运动异常分数进行加权求和,得到整个视频帧的异常分数,根据所述异常分数判断视频帧是否异常。本发明通过将外观和运动信息结合起来,可以更全面地考虑到可能出现的异常情况。
技术关键词
视频异常检测方法
词嵌入向量
编码特征
二分类器
图像编码器
聚类
视频帧
运动
语义特征
文本编码器
解码器
重构误差
异常检测技术
异常检测系统
系统为您推荐了相关专利信息
编码器模块
频域特征提取
级联
多模态
浅层特征提取
编码特征
图像融合方法
可见光图像
空间注意力网络
级联
时序动作检测方法
跨模态
视觉特征
文本编码器
图像编码器