[发明专利]空间数据的处理方法及系统

权利要求书

1.一种空间数据的处理方法，其特征在于，包括：

基于地理单元对空间数据进行划分，获得地理单元数据集合，其中，所述空间数据包括栅格数据和矢量数据；

将所述地理单元数据批量存入开源分布式文件系统；

对存入所述开源分布式文件系统的地理单元数据采用Map/Reduce算法进行分布式计算；

所述基于地理单元对空间数据进行划分，获得地理单元数据集合的步骤，具体包括：

将所述空间数据划分为栅格数据和矢量数据；

采用空间四叉树格网对所述栅格数据进行递归切分，获得地理单元数据；

基于专题或位置对所述矢量数据进行划分，获得地理单元数据，其中，

基于位置对所述矢量数据进行划分包括基于不规则区域或者规则空间四叉树格网对所述矢量数据进行划分。

2.根据权利要求1所述的空间数据的处理方法，其特征在于，在所述将所述地理单元数据批量存入开源分布式文件系统步骤中，所述地理单元数据作为数据块存储在不同的数据节点；每个数据块被复制成数份，分别存储在不同的数据节点上。

3.根据权利要求2所述的空间数据的处理方法，其特征在于，在所述将所述地理单元数据批量存入开源分布式文件系统步骤中，包括调节数据块的大小以适应地理单元数据的大小，所述数据块的大小设置为64M～1G。

4.根据权利要求2所述的空间数据的处理方法，其特征在于，在所述将所述地理单元数据批量存入开源分布式文件系统步骤中，如果空间计算需要用到所述数据块的全局信息，则提前将所述全局信息写入文件头中。

5.根据权利要求1所述的空间数据的处理方法，其特征在于，在所述对存入开源分布式文件系统的地理单元数据采用Map/Reduce算法进行分布式计算的步骤中，采用基于地图与网格叠加的视图进行动态监控。

6.一种空间数据的处理系统，其特征在于，包括：

空间数据划分模块，用于基于地理单元对空间数据进行数据划分，获得地理单元数据集合，其中，所述空间数据包括栅格数据和矢量数据；

地理单元存储模块，用于将所述空间数据划分模块输出的地理单元数据批量存入开源分布式文件系统；

空间计算模块，用于对存入所述地理单元存储模块中的地理单元数据采用Map/Reduce算法进行分布式计算；

所述空间数据划分模块具体包括：

数据分类单元，用于将所述空间数据划分为栅格数据和矢量数据；

栅格数据切分单元，用于采用空间四叉树格网对所述栅格数据进行递归切分，获得地理单元数据；

矢量数据切分单元，用于基于专题或位置对所述矢量数据进行划分，获得地理单元数据，其中，

基于位置对所述矢量数据进行划分包括基于不规则区域或者规则空间四叉树格网对所述矢量数据进行划分。

7.根据权利要求6所述的空间数据的处理系统，其特征在于，所述地理单元存储模块具体包括：

数据块存储单元，采用开源分布式文件系统对所述空间数据划分模块获得的地理单元数据进行存储，所述地理单元数据作为数据块存储在不同的数据节点；

冗余存储单元，用于将每个数据块复制成数份，分别存储在不同的数据节点上。

8.根据权利要求7所述的空间数据的处理系统，其特征在于，所述地理单元存储模块还包括：

数据块调节单元，用于调节数据块的大小以适应地理单元数据的大小，所述数据块的大小设置为64M～1G。

9.根据权利要求7或8所述的空间数据的处理系统，其特征在于，所述地理单元存储模块还包括：

信息写入单元，用于当空间计算需要用到数据块的全局信息时提前在文件头中写入所述全局信息。

10.根据权利要求6所述的空间数据的处理系统，其特征在于，所述空间计算模块具体包括：

空间计算单元，用于对地理单元存储模块中的地理单元数据进行空间计算；

动态监控单元，采用基于地图与网格叠加的视图对空间计算进程进行动态监控。