一种基于模型反演与蒸馏的联邦学习图像识别方法

AITNT
正文
推荐专利
一种基于模型反演与蒸馏的联邦学习图像识别方法
申请号:CN202411967201
申请日期:2024-12-30
公开号:CN119785110B
公开日期:2025-10-10
类型:发明专利
摘要
本发明公开了一种基于模型反演与蒸馏的联邦学习图像识别方法,包括:1.在各个客户端上训练本地图像模型并上传到联邦中心服务器;2.联邦中心服务器接收本地图像模型并进行加权聚合;3.联邦中心服务器利用本地图像模型进行深度反演来构建合成数据集;4.联邦中心服务器利用合成数据集进行图元重标记和知识蒸馏;5.对全局图像模型参数进行迭代优化,得到最优参数的全局模型并下发给各个客户端用于图像识别。本发明采用深度反演方法合成数据,并通过注意力权重对生成的不同信息密度的图元进行筛选,并在后续知识蒸馏阶段对信息密度低的图元利用集成模型进行重标记,从而解决针对数据异构场景下单次通信联邦学习的图像识别问题。
技术关键词
中心服务器 噪声样本 图像识别方法 客户端 图元 蒸馏 密度 深度反演方法 标签 数据 注意力 标记 随机梯度下降 超参数 可读存储介质 掩码矩阵 像素
系统为您推荐了相关专利信息
1
基于手写识别的阿尔茨海默病风险预警方法、装置及系统
阿尔茨海默病 量表 风险预警方法 蓝牙笔 风险预测模型
2
一种隐私保护联邦学习安全聚合方法、装置、设备及介质
服务器 双陷门 客户端 私钥 分割算法
3
基于多模态数据的土壤修复参数预测方法、装置及设备
梯度提升模型 回归树模型 随机森林模型 参数预测方法 生物
4
一种单通网络环境中的高效通讯系统
通讯系统 服务端 客户端 消息 自定义协议
5
分布式用户参与的大模型训练系统及方法
数据中心 分布式用户 模型训练系统 模型训练方法 训练集
添加客服微信openai178,进AITNT官方交流群
驱动智慧未来:提供一站式AI转型解决方案
沪ICP备2023015588号