摘要
本公开提供了一种数据处理方法,可以应用于大数据技术领域。该方法包括:响应于接收到业务系统发送至数据采集系统的报文数据,确定报文数据的标志位;在标志位表征报文数据完整且正确的情况下,将报文数据存储至数据采集系统的分布式系统中;利用流计算引擎对报文数据进行批处理,得到实时指标数据;利用深度学习模型处理报文数据,得到预测数据;以及在实时指标数据与预测数据之间的差值大于误差阈值的情况下,基于预测数据对实时指标数据进行更新,得到数据处理结果,其中,误差阈值是基于历史数据进行调整的,历史数据包括历史指标数据和与历史指标数据相对应的历史预测数据。
技术关键词
数据采集系统
深度学习模型
业务系统
分布式系统
标志位
指标
报文校验方法
数据处理方法
误差
系统页面
数据可视化展示
循环冗余校验
记录工具
数据存储模块
数据处理装置
计算机程序产品
处理器
系统为您推荐了相关专利信息
交通流参数
多模态特征融合
交通预测方法
语义特征
无人机视频采集
混合深度学习模型
长短期记忆网络
噪声
多尺度特征提取
回归预测方法
关系型数据库
数据仓库数据
图表推荐
模块
异常数据处理
状态感知系统
数据处理模块
特征提取单元
传感器组
生成控制指令