摘要
本说明书公开了一种预训练语言模型后门检测方法、装置及电子设备,其中,方法包括:对目标预训练语言模型进行模型孪生处理得到目标模型和辅助模型;将后门测试文本输入目标模型并对目标模型进行可训练特征插入,确定目标模型针对后门测试文本所输出的目标输出特征;以及确定辅助模型针对后门测试文本所输出的辅助输出特征;基于目标输出特征和辅助输出特征对目标模型进行模型测试训练,得到模型测试训练结果,基于模型测试训练结果确定目标预训练语言模型的后门检测信息。
技术关键词
预训练语言模型
输出特征
嵌入特征
训练特征
文本
后门检测方法
计算机存储介质
计算机程序产品
电子设备
处理器
指令
模块
存储器
控制单元
参数
系统为您推荐了相关专利信息
波动预测方法
特征选择
矩阵
编码结构
电力系统数据建模
文本
信息检索方法
信息检索设备
信息检索装置
可读存储介质
时间序列模型
时间序列预测模型
文本
关键词
因子