一种用于数据中台的数据处理资源动态分配方法

本发明公开了一种用于数据中台的数据处理资源动态分配方法，涉及发电企业数据处理技术领域；本发明通过Kafka系统处理数据中台的实时数据并生成实时数据处理结果；通过Hadoop系统处理数据中台的离线数据并生成离线数据处理结果；对未来单位时间内实时数据处理结果和离线数据处理结果的数据量进行预测，并输出实时数据量预测值与离线数据量预测值；采用动态权重资源分配算法对实时数据量预测值与离线数据量预测值进行计算资源量的分配；这种方式能够更精准地匹配未来单位时间内的资源需求，避免资源的过度分配或不足，大大提高了资源的利用率。