摘要
本申请提供了一种基于云边协同的实时数据处理系统和方法,系统包括:数据采集层,用于通过多协议栈配置支持多种数据源接入;基于轻量级消息传输协议实时采集数据;对采集到的数据进行标准化处理;数据处理层,用于基于预设规则引擎,对标准化处理后的数据,进行数据分层处理与转换,得到待处理数据;实时监测层,基于Kappa架构和Flink流处理引擎,结合深度学习算法和时间序列分析技术,根据所述待处理数据,确定是否存在异常情况并生成监测报告。本申请能解决现有技术容易出现网络拥塞、处理延迟高等问题。
技术关键词
实时数据处理系统
时间序列分析技术
消息传输协议
实时数据处理方法
数据采集层
深度学习算法
数据资产管理
RESTful接口
分片策略
MQTT协议
多协议
计算机可执行指令
智能行车
资源监控
评估算法
调度系统
节点
任务调度
系统为您推荐了相关专利信息
低空无人机
Kafka集群
高并发海量数据
监测方法
终端采集设备
健康监测系统
数据采集层
无监督
运动轨迹信息
云端
超声波特征
决策树模型
振动特征
超声波传感器
多传感器采集
融合深度学习
自愈系统
数据采集层
长短期记忆网络
故障诊断模块