模型检查点文件的管理系统

本发明涉及人工智能技术领域，公开了模型检查点文件的管理系统，包括：数据下载器、元数据存储系统、本地存储系统和远程存储系统；数据下载器用于接收检查点文件获取请求，向元数据存储系统发送用于获取第一检查点文件的存储地址的元数据获取请求；元数据存储系统用于根据元数据获取请求查询第一检查点文件对应的第一元数据，并将其中的第一存储地址发送至数据下载器；数据下载器用于根据第一存储地址从远程存储系统处获取第一检查点文件，将第一检查点文件存储至本地存储系统；本地存储系统用于将第一检查点文件返回至第一训练任务。本发明可实现对海量检查点文件的存储，优化存储性能，保障模型训练任务能够可靠运行。