基于模态一致性的提示学习方法以及计算机设备

AITNT
正文
推荐专利
基于模态一致性的提示学习方法以及计算机设备
申请号:CN202411510808
申请日期:2024-10-28
公开号:CN119623572B
公开日期:2025-11-14
类型:发明专利
摘要
本申请公开了一种基于模态一致性的提示学习方法以及计算机设备,属于计算机技术领域。通过本申请实施例提供的技术方案,利用目标视觉语言预训练模型,基于文本提示和多个样本类别文本,得到多个文本嵌入特征。利用视觉提示和多个样本图像,得到多个视觉嵌入特征,文本提示和视觉提示均属于目标领域。确定多个视觉嵌入特征的视觉特征分布以及多个文本嵌入特征的文本特征分布,利用视觉特征分布和文本特征分布来确定预测传输矩阵,预测传输矩阵用于表示多个视觉嵌入特征变换为多个文本嵌入特征的方式。基于预测传输矩阵、多个视觉嵌入特征以及标注信息对文本提示和视觉提示进行调整,从而利用特征和特征分布来进行提示学习,提高提示学习的效果。
技术关键词
嵌入特征 文本 预训练模型 视觉特征 矩阵 样本 学习方法 分布特征 图像组合 计算机设备 语义特征提取 图像特征提取 存储器 处理器 关系
系统为您推荐了相关专利信息
1
一种基于深度学习集成RVFL的海底生物图像分类方法和系统
图像分类方法 特征提取模块 深层特征提取 语义特征 生物
2
排污管道机器人自主巡检与返航控制方法及系统
返航控制方法 状态编码器 网络 排污管道 深度确定性策略梯度
3
一种全屋智能家居交互方法及系统
智能家居交互方法 序列 节点 文本 语义
4
一种面向敏感信息的数据增强方法、系统、设备及介质
敏感信息数据 命名实体识别 序列 标签 文本
5
一种基于卷积块注意力机制密集网络的RNA-蛋白质结合位点判别方法
注意力机制 判别方法 序列特征 局部特征信息 位点
添加客服微信openai178,进AITNT官方交流群
驱动智慧未来:提供一站式AI转型解决方案
沪ICP备2023015588号