一种基于双重对比提示学习的零样本图像分类方法

AITNT
正文
推荐专利
一种基于双重对比提示学习的零样本图像分类方法
申请号:CN202411967774
申请日期:2024-12-30
公开号:CN119888346A
公开日期:2025-04-25
类型:发明专利
摘要
本发明提供了一种基于双重对比提示学习的零样本图像分类方法,包括:步骤1,拼接可学习向量与类别名构建可学习的prompt,并将其送入到CLIP的文本编码器中得到文本特征;步骤2,对图像数据进行数据增强,并将其送入到CLIP的图像编码器中得到图像特征;步骤3,将得到的文本特征和图像特征在文本空间和视觉空间上分别进行对比学习,训练得到prompt;步骤4,利用训练完成的prompt进行零样本图像分类,提升零样本图像分类性能。
技术关键词
零样本图像分类 图像分类方法 文本编码器 图像编码器 数据 三元组 预训练模型 视觉 锚点
系统为您推荐了相关专利信息
1
一种基于多模态数据融合的儿童能力评估方法及装置
多模态数据融合 能力评估方法 大语言模型 儿童 文本
2
多模型优化集成的植被总初级生产力估算方法与系统
总初级生产力 XGBoost算法 植被 多模型 超参数
3
基于语义识别的座舱控制方法、装置、设备及存储介质
语音控制文本 车辆座舱 唇语识别 语义 词汇数据库
4
一种基于人工智能的水文气象预测方法及系统
多模态特征融合 矩阵 水文 气象 文本特征向量
5
一种基于CPO算法优化GRNN模型的发电功率预测方法
GRNN模型 发电功率预测方法 算法 数据 策略
添加客服微信openai178,进AITNT官方交流群
驱动智慧未来:提供一站式AI转型解决方案
沪ICP备2023015588号