面向边缘云的分布式模型训练时间评估方法及装置

AITNT
正文
推荐专利
面向边缘云的分布式模型训练时间评估方法及装置
申请号:CN202411719175
申请日期:2024-11-28
公开号:CN119854156A
公开日期:2025-04-18
类型:发明专利
摘要
本发明公开了一种面向边缘云的分布式模型训练时间评估方法及装置,包括:将深度学习模型处理负载的流程分为数据移动阶段、模型计算阶段和通信阶段;收集分布式集群的关键特征及不同深度学习模型的模型特征,确认每个特征的数据代表值,交叉组合数据代表值分别测量三个阶段的负载时间开销,构建组合特征实验样本;为每个阶段的负载时间开销建模,获取深度学习模型训练任务的负载时间评估模型;构建误差函数,以最小化误差函数为目标利用非负最小二乘法求解负载时间评估模型的参数;将负载时间评估模型的参数代入,利用更新后的负载时间评估模型对接收到的任务的负载时间开销进行评估。本发明通过通用层级建模,解决深度学习模型的异构性问题。
技术关键词
深度学习模型 分布式模型 阶段 最小化误差 误差函数 样本 数据 参数 代表 注意力机制 集群 图像分割 模块 线性 评估装置 表达式 矩阵 内存 元素
系统为您推荐了相关专利信息
1
基于AI的柔性直流支撑电容器生产方案确定方法及系统
支撑电容器 柔性直流 阶段 语义向量 聚焦特征
2
一种电网工程风险评估方法、系统、计算机设备及介质
工程风险评估 时间序列特征 图谱 语义向量 融合特征
3
基于深度神经网络的波浪能发电功率预测方法及系统
发电功率预测方法 深度神经网络 预测残差 神经网络结构 生成场景
4
基于空间特征和颜色感知一致性的智能交通安全分析方法
智能交通安全 分析方法 颜色 眼睛 注视点
5
一种科技政策检索方法
检索方法 科技 模块 输入端 方针
添加客服微信openai178,进AITNT官方交流群
驱动智慧未来:提供一站式AI转型解决方案
沪ICP备2023015588号