摘要
本申请提供一种预训练模型的提示微调方法及装置。所述方法包括:按照预设的两种以上问题描述模板,对目标下游任务的标注语料中的原始输入样本进行语义扩展,得到各模板对应的问题描述;根据各模板对应的问题描述,生成各模板对应的提示;分别利用不同模板对应的提示对预训练模型进行微调,确定最优微调结果,并根据与最优微调结果对应的问题描述模板,生成最优提示模板,显著提升了预训练模型在特定下游任务上的适应性和性能。
技术关键词
模板
预训练模型
微调方法
计算机程序代码
关键词
计算机程序产品
电子设备
语义
样本
参数
微调装置
存储器
处理器
指令
指标
可读存储介质
模块
条目
标签