摘要
本发明公开了一种基于干净教师的对抗鲁棒蒸馏防御方法、系统及终端,其中方法包括:确定学生模型和预设教师模型,所述预设教师模型为干净教师模型;获取预设样本,基于所述预设样本生成对抗样本,确定所述学生模型的学习目标,所述预设样本为干净样本;基于所述预设教师模型,指导所述学生模型完成对预设样本和对抗样本的学习,得到完成所述学习目标的优化学生模型;基于自学习蒸馏机制,优化所述学生模型的学习目标;基于所述预设教师模型和所述优化学生模型,指导所述学生模型完成对预设样本和对抗样本的学习,得到完成优化后的学习目标的目标模型。能够同时提升学生模型的干净样本识别准确率与鲁棒性,拓展学生模型的知识体系。
技术关键词
教师
样本
学生
蒸馏
防御系统
参数
模型训练模块
标签
机制
可读存储介质
处理器
终端
程序
存储器
鲁棒性
计算机
系统为您推荐了相关专利信息
植物提取物
非线性映射关系
算法
神经网络模型
指标
底线
实例分割网络
高分辨率遥感影像
场景分类
识别方法
兴趣点
大语言模型
交叉注意力机制
语义
特征提取模块