摘要
本发明公开了跨模态协同对抗攻击方法及装置,涉及人工智能安全领域。用以解决当前在大语言模型对抗攻击领域中,跨模态协同攻击建模难、优化机制构建难的问题。该方法提供的跨模态协同攻击能够规避这些基于单模态内容反馈的安全对齐机制,从而突破现有的防护手段,提高攻击的复杂性和不可预测性;再者,通过在关键跨模态语义子空间中优化对抗扰动,结合历史和未来梯度信息,能够提高扰动优化的效率、收敛速度和稳定性,避免陷入局部最优解,从而提升攻击的实用性和可操作性。
技术关键词
文本
语义
图像
跨模态
矩阵
定位方法
标签
预测类别
广义
注意力机制
多模态
主题
词语
计算机设备
处理器
样本
策略
图文
数据
可读存储介质
系统为您推荐了相关专利信息
多模态特征融合
关键帧
融合特征
关键点
识别方法
特征提取网络
装备体系评估
卷积模块
输入端
多模态
接触网绝缘子
绝缘子缺陷
实时图像信息
缺陷识别方法
参数
特征提取模型
产量预测方法
玉米
噪声抑制
全局特征提取
多模态特征融合
情感分析方法
特征提取模块
情感分析模型
支持向量机模型