摘要
本公开涉及一种联邦学习方法、装置及介质,属于人工智能技术领域。该方法包括:接收全局特征提取器、个性化特征提取器、全局头、个性化头、以及全局注意力机制模块;利用全局特征提取器覆盖局部模型的全局特征提取器和个性化特征提取器,全局头覆盖局部模型的全局头,全局注意力机制模块覆盖局部模型的注意力机制模块;动态调整权重分配;对局部模型的个性化头的参数进行更新;利用损失函数对全局特征和个性化特征的相关性进行平衡,其中,损失函数包括交叉熵损失函数和相关性对齐损失函数。本方法更适应各客户端的非独立同分布数据,提升了本地数据利用率,确保了局部模型性能最优,且不损失联邦学习模型的泛化能力。
技术关键词
全局特征提取
联邦学习方法
个性化特征
注意力机制
联邦学习模型
特征提取器
中心服务器
客户端
学习装置
参数更新模块
计算机程序指令
人工智能技术
动态
存储器
处理器
可读存储介质
系统为您推荐了相关专利信息
碳纤维复合芯导线
实时健康监测
实时监测数据
电气特征
Softmax函数
惯性传感器数据
动态趋势分析
三维位置信息
加速度
管理系统
多模态数据融合
风险管理方法
数据处理模块
数据分类
可执行程序代码
风速预测方法
时域卷积网络
分数阶混沌
残差注意力机制
隶属度函数
动力总成
远程监控方法
多模态数据采集
云端服务器
车载终端