一种基于层级融合变换网络的地基云状分类方法

本发明实施例公开了一种基于层级融合变换网络的地基云状分类方法，该方法包括：构建特征嵌入模块，将云图像和气象要素信息两种模态嵌入为视觉嵌入特征和气象嵌入特征；构建视觉‑气象联合变换模块，利用拼接自注意力层捕获两种模态的全局上下文信息；构建视觉‑气象交叉变换模块，利用平行交叉注意力层对两种模态进行对齐以减少模态间的不一致性；构建损失计算模块，运用多模态对比学习，同时约束同层级不同模态以及同模态不同层级的特征，提高模型的判别能力；构建分类决策模块，将融合后的特征输入分类器，输出云状类别。本发明充分利用拼接自注意力层、平行交叉注意力层等优势进行多模态融合和对齐，进一步提高了地基云状分类的准确率。