摘要
本申请公开了一种数据生产方法、装置、设备以及存储介质,涉及数据处理技术领域,所述方法应用于数据管理平台,所述方法包括:接收用户的数据生产需求;基于所述数据生产需求与预设的数据版本列表,创建第一数据生产任务;基于所述第一数据生产任务,创建数据调度队列;基于所述机器集群、预设调度算法以及数据调度队列,进行数据生产,得到数据生产结果。本申请通过上述方法,能够实现对大规模数据集的快速生产,同时设置多数据版本满足不同的用户需求。
技术关键词
数据管理平台
调度算法
集群
队列
列表
数据处理技术
处理器
可读存储介质
分支
模块
存储器
容器
资源
计算机
周期