分布式模型训练方法及装置、程序产品、电子设备

本公开实施例是关于一种分布式模型训练方法及装置、计算机程序产品、电子设备，涉及计算机技术领域，该方法包括：基于阶段分区网络将机器学习模型划分为多个阶段，并将每个阶段划分为多个副本；通过阶段调度网络，将每个阶段的多个副本调度至多维网络，以对所述机器学习模型进行分布式训练。本公开能够提高网络利用率，提高训练效果。