基于语义引导的状态空间模型的视频去雨方法及去雨系统

本发明提出基于语义引导的状态空间模型的视频去雨方法及去雨系统，属于视频去雨技术领域，本发明为解决现有模型难以捕捉雨水的动态分布、不能区分雨水和动态背景以及不能兼顾计算效率与恢复质量的问题，其中去雨方法包括：输入雨天视频序列，利用DINOv2模型和ConvNeXt网络进行初步特征提取，将输入视频映射到潜在特征空间；通过多尺度语义融合模块对提取的雨天视频序列的语义特征和多尺度像素特征进行多尺度融合，输出融合特征；利用视频时空Mamba模块对融合特征进行时空一致性互补建模和时空互补融合，得到雨线和雨滴的完整去除的去雨视频。