摘要
本发明公开了一种基于智算平台的模型微调方法及智算平台,智算平台包括用户端、调度中心以及计算集群,本方法应用于调度中心侧,包括:接收用户端发送的模型微调任务,模型微调任务至少包括用户的出价、微调数据集以及计算需求量;基于出价、微调数据集以及计算需求量,结合计算集群中各计算节点的节点能力信息,以总收益最大化为目标,确定模型微调任务的最优调度组合,其中,最优调度组合包括目标计算节点;根据最优调度组合判断是否接受模型微调任务;若接受模型微调任务,则控制目标计算节点基于微调数据集执行模型微调任务。本发明可以提高计算节点的资源利用率,以及提供灵活定价的方案,以适应不断变化的市场供需关系。
技术关键词
拉格朗日对偶
节点
变量
时间段
集群
微调方法
数据
原始对偶算法
平台
决策
系统开销
模块
资源
关系