用于少样本图像分类任务的双提示学习空频集成网络系统

本发明提供一种用于少样本图像分类任务的双提示学习空频集成网络系统，包括：空频结合模块，用于从图像模态中提取由图像低频信息和空域信息结合生成的图像特征；双文本提示模块，用于从文本模态中提取可学习提示特征和手工提示特征并进行相似度计算后，得到可学习文本提示特征；图像文本交互模块，用于对图像特征和可学习文本提示特征进行融合，以更新可学习文本提示特征；对比学习模块，用于对图像特征和更新后的可学习文本提示特征进行对比学习，输出分类结果，以完成少样本图像分类任务。本发明的方案使模型能够很好地泛化到新的类别，弥合多种模态之间的语义鸿沟，高效地实现少样本图像分类任务。