一种基于无数据驱动的联邦学习知识蒸馏方法

AITNT
正文
推荐专利
一种基于无数据驱动的联邦学习知识蒸馏方法
申请号:CN202411493544
申请日期:2024-10-24
公开号:CN119578504A
公开日期:2025-03-07
类型:发明专利
摘要
本发明公开了一种基于无数据驱动的联邦学习知识蒸馏方法,属于联邦学习的个性化更新技术领域。包括:每个客户端构建分类网络和生成对抗网络;服务器端构建全局模型和教师模型;每个客户端对私有数据集进行增强,用于分类网络和生成对抗网络的训练,并将训练后的生成器和分类器模型参数反馈给服务器;服务器端更新全局生成器和全局分类器,并利用蒸馏数据对全局模型和教师模型进行训练,再将优化的全局生成器和全局分类器模型参数下发各客户端。本发明在服务器端利用教师网络的丰富知识指导与全局模型相互学习;在客户端引入MixDistribution数据增强技术进行个性化更新,实现数据的双向流动和知识共享,缓解数据异构造成的问题。
技术关键词
知识蒸馏方法 分类器模型 生成对抗网络 分类网络 客户端 教师 数据 代表 分类器参数 标签 特征提取器 生成噪声 服务器 批量 矩阵
系统为您推荐了相关专利信息
1
一种多种视频信号融合光端机及其实现方法
发射机 接收机 光端机 光纤传输功能 光纤跳线
2
一种基于预训练模型的软件项目缺陷预测方法及系统
预训练语言模型 缺陷预测方法 条件对抗生成网络 预训练模型 缺陷类别
3
一种基于传感器数据分析的肩袖损伤冲击测试方法
冲击测试方法 冲击波治疗仪 生成对抗网络模型 关节 PID控制器
4
数据的测试方法、装置、计算机程序产品和数据生成系统
校验模型 数据生成系统 自动化测试工具 测试方法 生成业务
5
基于大模型的皮肤检测方法、装置、电子设备及存储介质
皮肤检测方法 报告 卡片 异常状态 控件
添加客服微信openai178,进AITNT官方交流群
驱动智慧未来:提供一站式AI转型解决方案
沪ICP备2023015588号