摘要
本发明公开了一种结合自适应压缩的流式数据存储方法,具体涉及数据存储领域,包括接收实时数据并执行一阶分析任务,一阶分析任务基于数据的特征向量决定每个数据段的分段方式和压缩算法;对数据流持续输入,并执行二阶分析任务,在实时处理管道中分析数据流,通过B+树索引评估当前存储的数据段分布特征;若二阶分析任务的评估符合预期,则完成数据段的重构,否则返回一阶分析任务进行重新评估。通过依据数据的特征向量动态选择合适的压缩算法,使数据的压缩比与存储空间形成最优配比,提升存储效率并减少存储成本。
技术关键词
时效性
数据存储方法
分布特征
滑动时间窗口
存储块
压缩算法
存储系统
重构
数据访问
热点属性
索引
实时数据
冗余度
有效性
频率
队列管理
系统为您推荐了相关专利信息
环境监测数据
断点
概率分布函数
概率密度函数
线性回归方法
粒径测量方法
像素点
集料颗粒
幅值
机场跑道检测
电池温度调控系统
储能系统
电池包
曲线
滑动时间窗口
电网运行数据
综合能源管理
数字孪生
供电拓扑结构
可视化平台