摘要
本发明公开了一种即插即用的条件表征学习方法及系统,方法包括:给定输入图像及指定准则;通过大语言模型生成与指定准则相关的描述性文本,并将其编码为标准化的文本基;将输入图像编码为标准化的图像表征;将图像表征投影至文本基所张成的指定准则下的条件特征空间中,学习得到用于下游定制任务的条件表征。通过本发明学习得到的条件表示在指定的准则下将更具表现力,具有即插即用性、通用性和出色的可解释性,可适用于各种定制的下游任务。
技术关键词
大语言模型
表征学习方法
多模态
模板
文本编码器
图像编码器
唯一性
学习系统
投影模块
元素
词语
格式
矩阵