基于行业大模型的提示词攻击行为的检测方法、装置、设备及介质

AITNT
正文
推荐专利
基于行业大模型的提示词攻击行为的检测方法、装置、设备及介质
申请号:CN202510437284
申请日期:2025-04-09
公开号:CN119939578A
公开日期:2025-05-06
类型:发明专利
摘要
本申请公开了基于行业大模型的提示词攻击行为的检测方法、装置、设备及介质,涉及计算机技术领域,包括:基于预设正则表达式匹配库及客户端的提问信息对预设白名单进行多模正则匹配;若匹配失败则基于预设正则表达式匹配库及提问信息对预设黑名单进行多模正则匹配;若匹配失败,则利用预先基于目标语料训练集进行大模型微调后确定的拒识大模型对提问信息进行针对提示词攻击行为的检测;若检测结果表明提问信息为正常信息,则基于行业大模型确定提问信息对应的答复内容,利用预先基于所述目标语料训练集进行大模型微调后确定的拒答大模型对所述答复内容进行检测,以确定是否触发答复拦截操作。本申请提高了行业大模型对提示词攻击行为的防御能力。
技术关键词
白名单 训练集 条目 客户端 匹配模块 列表 日志 日期 端口 可读存储介质 服务端 处理器 电子设备 数据 语义 存储器 计算机 风险
系统为您推荐了相关专利信息
1
基于MGWO优化Informer的超短期风电功率预测模型的建模方法
短期风电功率预测 历史功率数据 建模方法 灰狼算法 位置更新
2
一种人工智能的网络安全防护系统及方法
网络安全防护方法 网络安全防护系统 网络安全分析 数据处理模块 网络安全防护技术
3
一种基于深度神经网络的人像摄影图像仿色方法和系统
注意力 深度神经网络 风格 图像特征编码 全局特征提取
4
基于神经网络选择模型的交通事件主动处置决策方法及系统
决策方法 交通 神经网络模型构建 数据 训练集
5
一种数据交互处理方法和系统
数据交互方法 编码 三角形 动态数学模型 接收端
添加客服微信openai178,进AITNT官方交流群
驱动智慧未来:提供一站式AI转型解决方案
沪ICP备2023015588号