一种融合实例和场景的自动驾驶视觉语言大模型对抗攻击方法及相关装置

本发明提供了一种融合实例和场景的自动驾驶视觉语言大模型对抗攻击方法及相关装置，属于人工智能安全技术领域。本发明方法利用若干个场景级注意力图，对视觉问答数据集中的场景级图像进行场景级干扰，得到一个被干扰文本攻击的场景级图像，所述场景级干扰指的是对场景级图像进行全局对抗干扰。将若干个实例级图像、一个被干扰文本攻击的场景级图像、一个场景级图像对应的若干个增强文本在特征空间中进行交互融合，得到一个场景级的对抗样本图像。与现有技术相比，本发明解决了自动驾驶中多模态交互攻击的成功率不高的问题。