一种时序数据优化存储方法

AITNT
正文
推荐专利
一种时序数据优化存储方法
申请号:CN202410966716
申请日期:2024-07-18
公开号:CN118838889A
公开日期:2024-10-25
类型:发明专利
摘要
本发明提供了一种时序数据优化存储方法,包括以下步骤:系统接收用户对工业时序数据的访问请求;分析数据的增长和访问模式,确定预分区数量和分区键策略;然后创建一个复合RowKey并创建HBase表;结合HBase表的自动分裂特性和Salting技术,实现数据在多个Region之间的均匀分散;启用HBase的数据压缩功能,并使用Snappy压缩算法提高数据读写速度;使用Grafana监控平台进行监控;根据监控数据,实时调整HBase配置和优化策略。本发明采用上述的一种时序数据优化存储方法,实现了数据的高效存储和快速访问,同时优化了存储资源的使用,显著提升了分布式存储系统处理工业时序大数据的能力。
技术关键词
数据优化存储方法 工业时序数据 HBase表 数据压缩功能 优化存储系统 时间序列模式 时序大数据 数据读写速度 压缩算法 监控平台 分布式存储系统 数据分布 识别关键字 分区策略 性能监控
系统为您推荐了相关专利信息
1
一种集成回声状态网络的换热站热负荷建模方法
回声状态网络 负荷建模方法 矩阵 粒子群优化算法 变量
2
一种基于数据热度的RAID卡静态缓存管理方法和设备
缓存管理方法 RAID控制器 生成历史数据 缓存策略 训练神经网络模型
3
基于KAN的对抗式无监督时序异常检测方法及系统
时序异常检测方法 工业时序数据 编码器 广义帕累托分布 解码器模型
4
工业时间序列的模糊动态推理方法、装置及设备
动态推理方法 工业设备 模糊逻辑 模糊隶属度 计算机执行指令
5
基于人工智能的数据优化存储方法及系统
数据优化存储方法 数据迁移 实时监测数据 层级 高性能
添加客服微信openai178,进AITNT官方交流群
驱动智慧未来:提供一站式AI转型解决方案
沪ICP备2023015588号