摘要
本发明涉及数据处理技术领域,具体为一种用于海量数据分析的边缘计算方法。本发明在处理海量Web服务器访问日志时,通过引入日志字段结构、字段复杂度与数据量级相结合的方式明确资源配置需求,实现对线程、内存与IO调用的精准预估,进一步基于服务器行为特征中响应时延、完成率及中断情况构建行为序列,形成针对调度能力的动态评估标准,在候选节点筛选中融合资源需求与行为能力间的灰色关联评分方法,结合节点实时资源占用状态进行排序优化,使任务分配路径在多维资源利用角度具备更优的均衡性,在任务调度后通过日志片段映射实现并行处理,再经边缘侧汇总形成结构化的分析输出,提高了边缘节点调度的适应度与任务分派的精度。
技术关键词
海量数据分析
边缘计算方法
日志数据分析
时间序列特征
灰色关联度
访问日志分析
字段
日志结构
服务器节点
列表
资源关联关系
资源占用状态
灰色关联分析
时延
指标
内存占用量
系统为您推荐了相关专利信息
金钗石斛提取物
网络药理学
液质联用技术
HPLC指纹图
灰色关联度分析
长短期记忆网络
高精度压力传感器
机器人
动态
数据
视觉检测方法
表面图像数据
三维点云数据
非瞬时性计算机可读存储介质
打印机
光伏发电功率
光伏发电量预测
皮尔逊相关系数
时间序列特征
残差模块
电网运行状态
时间序列特征
负荷
信号
门控循环单元