摘要
本发明提供了一种基于多阶段并行策略的水利大数据高效处理方法及系统,其中方法包括步骤S1,将水利数据按预设时间窗口划分为多个子数据集,每个子数据集封装为独立的任务包;步骤S2,基于任务包,通过CPU‑GPU协同架构进行动态负载均衡计算,输出完成计算的任务包;步骤S3,将完成计算的任务包,解析后输出至业务端。本发明采用改进的种子蔓延算法,通过CPU‑GPU协同架构,利用全局任务池和动态负载迁移技术,提升GPU计算资源利用率,采用三级动态拉取控制策略避免GPU过载或闲置。本发明从算法设计、硬件加速、数据组织和业务适配四个维度构建了完整的水利大数据处理体系,提升了处理效率,为智慧水利建设提供了可靠的技术支撑。
技术关键词
水利大数据
并行策略
多阶段
多处理器
磁盘缓存区
动态
移动平均算法
无锁队列
迁移技术
指标
阈值方法
存储结构
控制策略
参数
指数
标签
核心
系统为您推荐了相关专利信息
能源补给站
协同优化方法
能源系统
能量分配策略
氢燃料电池汽车
内存
深度学习模型
硬件设备信息
深度学习框架
优化器
数字孪生模型
数据分析方法
大数据挖掘技术
权限管理系统
资源
多处理器
自愈方法
芯片模块
恢复控制器
动态权重分配