结合交叉注意力和记忆优化的视频异常检测方法及系统

本发明提出结合交叉注意力和记忆优化的视频异常检测方法及系统，将RGB数据和光流数据分别输入到外观编码器和运动编码器分支，在外观编码器和运动编码器分支中，使用卷积模块与最大池化层逐步提取不同尺度的外观特征与运动特征；然后，将外观编码器和运动编码器分支的输出特征作为交叉注意力机制的输入数据，利用运动特征丰富外观特征的表征，实现外观与运动特征的融合；接着，将外观与运动的融合特征输入记忆模块对特征进行进一步优化，提升对于正常特征的提取与表达能力；最后，利用未来帧解码器，充分利用不同尺度的外观特征，逐级解码，获得生成的未来帧，提升视频异常检测的精度。