数据与知识协同融合的光学遥感图像识别方法及系统

本发明提供了一种数据与知识协同融合的光学遥感图像识别方法及系统，所述方法包括如下步骤：步骤S1：数据驱动分类器预训练模块使用遥感图像数据集训练数据驱动分类器CLIP‑Adapter；步骤S2：分布外样本识别模块对输入数据进行推理，并进行分布外样本识别；步骤S3：分布内样本分类模块对分布内的样本进行详细分类。本发明结合MSP(最大Softmax概率)得分函数，通过置信度阈值自动拒绝未知类别样本，具有更强的开集识别能力；本发明仅需少量数据训练轻量适配器，解决遥感数据标注成本高昂的问题，具有数据高效性与低训练成本的特点；本发明进行多模态知识融合，动态融合CLIP‑Adapter(数据驱动)与RemoteCLIP(知识驱动)模型，通过网格搜索优化权重，提升分类精度。