摘要
本发明涉及数据处理技术领域,具体涉及基于深度学习的负载感知与数据动态布局方法及系统,所述方法包括:实时采集分布式集群中各节点的硬件负载指标,并对硬件负载指标进行预处理;基于预处理后的硬件负载指标,通过加权模糊逻辑算法计算各节点的综合负载评分;根据综合负载评分划分负载区间并匹配预定义策略组合;基于目标数据块的当前业务流量峰谷状态及匹配的预定义策略组合,动态调整压缩算法、压缩比例及碎片合并参数,其中所述业务流量峰谷状态通过请求处理速率与响应时间判定。其目的在于,实现动态化、细粒度的负载感知与数据布局。
技术关键词
动态布局方法
压缩算法
模糊逻辑算法
指标
节点
策略
动态布局系统
集群
磁盘
数据处理技术
数据采集模块
参数
周期性
表达式
速率
匹配模块
高压力
系统为您推荐了相关专利信息
强化学习模型
柔性作业车间
邻居
异构
多层感知机
远程故障诊断方法
无监督学习算法
消息队列系统
数据采集单元
监控模块
涂抹墙壁
涂料
循环神经网络模型
节点特征
时间段
储能设备
动态响应模型
新能源电网
指数预测方法
时效性