基于容器的大模型训练方法及系统

本发明公开了一种基于容器的大模型训练方法，涉及模型训练技术领域，用于解决现有数据集管理复杂，获取效率低的问题，该方法包括以下步骤：构建数据集，并根据所述数据集生成OCI镜像；通过Kubernetes集群加载所述OCI镜像；通过所述Kubernetes集群中的主训练容器执行模型训练，其中，训练时的数据加载通过Kubernetes集群中的Datasetscar容器完成。本发明还公开了一种基于容器的大模型训练系统。本发明通过将数据集封装为OCI镜像，使用时只需获取镜像文件，便于管理和版本控制。