一种模型训练方法、装置、存储介质及设备

本说明书公开了一种模型训练方法、装置、存储介质及设备，可以通过在模型进行训练的前向传播过程中，对待训练模型的每层网络层输出的激活值进行分组融合，并可以通过对每层网络层的激活值导数掩码张量进行位压缩，从而可以显著减少模型训练的过程中对内存的占用，进而可以提升模型的训练效率并降低模型的训练成本。