摘要
本发明提出一种基于时序数据压缩的数据库监控运维方法、系统,通过高效的数据采集和压缩技术,实现数据库平台各项指标数据的实时监控。系统将能够高效地采集数据库运行过程中产生的各种性能数据,并通过压缩算法对时序数据进行优化,减少数据的冗余存储。在数据存储与管理过程中通过计算一级差分序列和二级差分序列,减少存储的数据量;使用差分将原始数据序列中的趋势去除,使得后续的差分序列更易于压缩,同时,对于非恒定差分,通过设置动态阈值,仅记录大于阈值的差分值,在保证数据重要信息不丢失的前提下,忽略微小变化,提高压缩率。另一方面,通过Srelation判断差分序列的规律性,可以选择性地应用压缩策略,使得对于不同特性的时序数据能够有针对性地应用合适的压缩方法,提高处理效率。通过以上设计,提高压缩数据的存储和处理效率,系统能够更快速地进行数据解压和分析,实现对数据库运行状态的实时监控。
技术关键词
序列
数据压缩
运维方法
监控运维系统
时序
数据存储
子模块
信息不丢失
数据采集模块
压缩算法
预警模块
日志
编码
参数
冗余
策略