摘要
本发明涉及数据存储技术领域,具体公开了一种基于工业互联网的设备数据存储Doris方法,包括以下具体步骤:S1:获取工业设备节点数据;S2:对获取的数据进行预处理;S3:将预处理后的数据上抛至Kafka;S4:Doris消费Kafka数据并存储;S5:监控与性能优化;S6:扩展:二次利用与下游分析。本发明显著降低了数据处理延迟,提升实时性;提升了数据质量和一致性,减少缺失与异常;自动化分区与存储清理降低运维成本,提升可扩展性。
技术关键词
工业互联网
分区功能
分区策略
Kafka集群
业务逻辑设计
分布式消息队列
时序预测模型
设备健康状态
查询优化器
工业设备
数据存储技术
数据不丢失
网关
消息主体
日志
有效值
系统为您推荐了相关专利信息
业务管理平台
智能管理方法
画像
关键绩效指标
分布式追踪
单站定位方法
正弦模型
序列
标签设备
工业互联网
Kafka集群
资源需求数据
内存
监控工具
指标
数据转换方法
梯度方向直方图
键值
分区策略
哈希算法