摘要
本发明属于数据处理领域,本发明公开了一种面向物联网的实时数据处理系统和方法;包括长尾设备,长尾设备端的数据通过通信协议传输到边缘层,边缘层中的边缘网关用于接收数据,边缘层还包括数据过滤器,数据过滤器基于过滤规则对无用数据进行丢弃,保留价值数据;基于过滤规则对数据进行正常数据和潜在异常标记,通过异常确认机制,最终输出高价值数据;事件检测器通过模型规则对价值数据进行异常检测,若数据异常,则将数据划分到高优先级队列,否则为低优先级队列,高优先级数据优先传输到云端进行应用,低优先级数据进行沉滞处理;云端用于接收高优先级数据并触发报警通知,实现面向物联网的实时数据高效率和高质量处理。
技术关键词
实时数据处理系统
实时数据处理方法
队列
计数器
检测器
标记
滑动窗口技术
云端
网关
过滤器模块
精度
机制
特征选择
通知
异常数据
算法