摘要
本发明属于大数据流式处理领域,具体涉及一种基于多智能体深度强化学习模型的Storm任务调度方法,包括:模拟Storm任务调度的环境,反映在实际Storm集群的资源分配、任务调度、集群负载等因素的动态变化;本发明采用基于反事实策略梯度(COMA)的近端策略优化(PPO)算法作为强化学习模型进行训练;采用训练阶段中心化,执行阶段去中心化的方法,以保证实际运行中Storm的实时性。本发明以最大化资源利用率和最小化资源使用成本为优化目标,结合多智能体深度强化学习和任务调度特性,使Storm在面对动态资源和工作负载时也能得到更智能和灵活的调度策略。
技术关键词
任务调度方法
集群
强化学习模型
最大化资源利用率
监控模块
决策
数据依赖关系
深度强化学习
节点
网络
资源监控
策略更新
内存
调度系统
资源分配
控制策略
系统为您推荐了相关专利信息
功耗优化方法
动态可调
核心
低功耗
电源管理单元
异构无人机
无人车
任务分配方法
多智能体协同
聚类
现场可编程门阵列
测试方法
数据处理电路
隔离模块
接口芯片
风电功率预测方法
风电功率预测模型
注意力机制
集群
时间序列关系
数字孪生模型
历史运行数据
分布式光伏逆变器
功率爬坡速率
测试方法