扰动样本对生成方法

本发明提供了一种扰动样本对生成方法、基于强化和互补空间搜索的多模态模型性能评估方法，上述扰动样本对生成方法包括：获取样本对和样本对的匹配标签；针对样本对，重复执行以下操作，直至扰动策略满足预设条件：针对多个扰动者中的每个扰动者，分别对图像和文本添加扰动数据，得到多个扰动者各自的扰动图像和扰动文本，扰动数据是基于扰动策略生成的；将多个扰动者各自的扰动图像和扰动文本分别输入到多模态模型中，得到多个扰动匹配数据；基于多个扰动匹配数据和匹配标签确定的目标奖励值，对扰动策略进行调整；将在扰动策略满足预设条件的情况下的扰动图像和扰动文本确定为目标扰动样本对。