一种基于分布式的多节点算法和数据自动并行方法

本发明公开了一种基于分布式的多节点算法和数据自动并行方法，通过将用户的计算任务细分为多个独立的子任务，并将数据集合理分块，自动将子任务和数据块分配到不同的计算节点进行并行处理，在各节点完成处理后，将中间结果汇总到协调节点或主节点，进行整合和进一步处理。本发明的方法通过自动化的任务细分和数据分块，根据计算节点的资源状况和任务需求，智能地将任务和数据分配到各个节点进行并行处理，无需复杂的模型训练或大量的历史数据，具有实现简单、适用范围广的优点，能够有效提升分布式系统的资源利用率和计算效率，适用于大规模数据处理和复杂计算任务。