基于迁移学习的跨数据中心存算协同训练加速方法

AITNT
正文
推荐专利
基于迁移学习的跨数据中心存算协同训练加速方法
申请号:CN202411529540
申请日期:2024-10-30
公开号:CN119443315A
公开日期:2025-02-14
类型:发明专利
摘要
本发明公开了一种基于迁移学习的跨数据中心存算协同训练加速方法,S1、在多个异构数据中心中部署深度学习模型的初始版本;S2、在第一数据中心对深度学习模型进行初始训练生成第一模型参数集;S3、生成本地深度学习模型参数集;S4、建立异构数据中心的动态权重调整机制;S5、根据参与权重分配不同的计算资源给各异构数据中心;S6、根据各异构数据中心的资源使用情况和任务需求实时调度存储资源和计算资源;S7、进行多任务并行处理;S8、通过动态资源调度策略监控各异构数据中心的资源利用率;S9、生成最终的全局优化模型参数集,并将全局优化模型参数集应用于各异构数据中心的后续任务部署。本发明优化了跨异构数据中心的协同训练效率。
技术关键词
异构数据中心 硬件资源配置 多任务并行处理 参数 传输路径 动态资源调度 数据传输延迟 管理系统 资源分配 复杂度 深度学习模型训练 协方差矩阵 智能调度系统 定义
系统为您推荐了相关专利信息
1
一种基于长距离依赖关系和零样本生成的模型量化方法
图像分类模型 蒸馏 网络 样本 图像全局特征
2
一种强化学习优化的基于扩散模型的图像融合方法
图像融合方法 图像评估方法 多模态网络 强化学习模型 注意力
3
基于多模态特征扰动分析预测石油采收率的解释方法及解释系统
多模态特征 特征值 机器学习模型 解释系统 分析器
4
一种基于大数据的环境监测系统
环境监测系统 季节性ARIMA模型 大数据 数据分析模块 空气质量传感器
5
基于AI与API-辅料组装配对的纳米晶体开发系统及工作方法和应用
纳米晶体 辅料 稳定活性药物成分 精氨酸甲基转移酶 消息传递网络
添加客服微信openai178,进AITNT官方交流群
驱动智慧未来:提供一站式AI转型解决方案
沪ICP备2023015588号