摘要
本发明公开了一种列式存储的气象格点数据的分片存储与多级抽稀方法,包括以下步骤:S1.数据解析与坐标转换;S2.批次数据合并;S3.多级抽稀聚合;S4.空间分片与索引建立;S5.列式分片存储。本发明通过基于列式存储的气象格点数据的分片存储与多级抽稀方法,可实现按空间位置分片存储,减少冗余传输;多级抽稀支持动态精度调整;结合列式存储提升压缩率和查询效率;高效索引与并行处理,支持大规模数据实时检索。
技术关键词
抽稀方法
分片
气象
瓦片
多线程并行处理
建立索引文件
池化算法
压缩算法
分辨率
数据存储
坐标系
精度
字段
冗余
变量
数值
组织