摘要
本发明公开了一种基于检索增强提示学习的遥感图像识别方法、设备及介质,方法包括:构建外部知识库,进行kNN检索,获取kNN检索相关知识;结合kNN检索相关知识生成CLIP的增强文本提示,基于CLIP增强文本提示获取CLIP预测;基于kNN检索相关知识获取kNN预测;基于kNN预测和CLIP预测获取最终预测结果。本发明在典型的检索增强提示学习框架基础上,针对视觉语言预训练模型CLIP在遥感图像这类非典型实例中的表征局限性,提出了一种融合非参数算法KNN的条件上下文增强方法体系,提升了对遥感图像这种非典型实例的内部理解能力,从而显著提高了模型在不同遥感图像数据集上的准确性和泛化能力。
技术关键词
遥感图像识别方法
预训练模型
视觉
遥感图像数据
文本编码器
处理器
标签
度函数
样本
存储器
周期
电子设备
介质
典型
因子
算法
框架
系统为您推荐了相关专利信息
视觉传感器
融合建图方法
测距传感器
测量点
主动式
图像地理定位系统
融合多模态特征
特征提取模块
图像地理定位方法
并行处理结构
激光轮廓传感器
视觉引导对准
视觉引导系统
机械臂
数据处理单元
轻量级神经网络
特征点
测试特征
视觉里程计
语义先验
图像检测模型
瓶颈
正交化方法
文本编码器
图像编码器