一种基于改进型多模态Transformer的赤潮异常检测方法及系统

本发明涉及赤潮异常检测技术领域，尤其是涉及一种基于改进型多模态Transformer的赤潮异常检测方法及系统。所述方法包括获取遥感图像和文本数据；根据获取的遥感图像和文本数据分别进行数据预处理；基于预处理后的数据进行视觉定位和文本选择；基于多模态胶囊机制的分层Transformer进行跨模态特征学习；基于语义路径引导注意力机制进行图像–语义特征对齐优化；对优化后的特征进行多模态知识蒸馏。本发明结合图像与文本预处理、视觉定位、关键词提取等模块，实现对复杂赤潮场景的多角度精准感知，突破了传统方法在数据单一、信息维度受限下难以准确识别赤潮区域的瓶颈。