基于spark的空间增量数据处理方法

本发明公开了一种基于spark的空间增量数据处理方法，属于空间数据处理领域。包括：基于spark并行分析原理建立均衡化空间智能分区算法；构建针对空间数据的分布式存储格式；在数据读取时，利用空间索引文件对原始分区数据文件进行过滤；基于智能分区算法和分布式存储格式构建空间分析模式，用于执行：读取新增空间数据，获取新增空间数据的数据量和空间范围；利用均衡化空间智能分区算法对新增空间数据进行空间分区操作，并对每个分区按照数据范围进行缩减；在各分区内建立空间二级索引；将处理完成的分区数据并行写入数据库。本发明能够提升空间增量数据处理的工作效率，降低人工成本，并确保处理过程采用统一标准，减少人为错误，提升准确度。