摘要
本发明公开了一种基于多智能体强化学习的大模型安全漏洞检测方法,涉及人工智能安全技术领域。该检测方法包括:构建初始提示词集合、提示词生成智能体和提示词判别智能体;选择初始提示词输入提示词生成智能体,生成的新提示词输入目标大模型,得到第一模型输出;将新提示词和第一模型输出组成键值对输入提示词判别智能体,获取新提示词的综合得分,并将新提示词添加至初始提示词集合;重复更新初始提示词集合,获取优化提示词集合输入目标大模型,获取第二模型输出;对第二模型输出进行敏感信息识别,判断目标大模型的安全漏洞。该检测方法可有效发现大模型潜在的安全风险漏洞,有助于提升目标大模型的安全性。
技术关键词
安全漏洞检测方法
多智能体强化学习
生成智能
敏感信息识别
关键词
策略更新
文本生成模型
模板
语义
分词
对抗性
分析模块
高风险
大语言模型
语法结构
机制
样本
键值
系统为您推荐了相关专利信息
协调优化控制方法
协调优化控制策略
储能设施
多智能体强化学习
发电量
半监督聚类
训练识别模型
噪声数据
分词
识别方法
循环卷积神经网络
嵌入特征
文档特征
注意力
关键词
敏感信息识别方法
计算机可执行指令
多层次
识别模块
智能算法识别
事件信息处理方法
非易失性存储介质
自然语言
关键词
语义结构