摘要
本申请提供一种大语言模型的提示词攻击检测方法和装置,涉及信息处理技术领域。该方法,获取待处理提示词信息;对所述待处理提示词信息进行类型识别,得到所述待处理提示词信息对应的提示词类型信息;基于所述提示词类型信息,确定所述待处理提示词信息对应的攻击判断模型;依次将所述待处理提示词信息输入到所述攻击判断模型的各个所述判断子模型,以得到与各个所述判断子模型分别对应的子模型评估信息;基于所述子模型评估信息,判断所述待处理提示词信息是否是针对所述大语言模型的攻击信息。该方法,可以提升大语言模型在提示词处理过程中的安全性。
技术关键词
大语言模型
攻击检测方法
风险
语义
攻击检测装置
逻辑
信息处理技术
处理器
可读存储介质
存储器
计算机
电子设备
关系
系统为您推荐了相关专利信息
大语言模型
鲁棒性
生成攻击样本
自然语言推理
复杂度
通用触发器
预训练语言模型
强化学习框架
标签
后门
客户风险识别方法
照片
图谱
文本特征向量
图像特征向量