[发明专利]数据处理方法、装置、服务器及存储介质

权利要求书

1.一种数据处理方法，其特征在于，所述方法包括：

将多表数据集进行多表关联清除操作，得到多维数据集，所述多表关联清除操作用于清除所述多表数据集间的冗余数据；

对所述多维数据集进行排序处理和聚合处理，得到待分发数据集；

将所述待分发数据集输入数据立方模型，得到数据分片，所述数据立方模型用于根据数据分片规则对所述待分发数据集进行分片处理；

通过所述数据立方模型将各个数据分片分发至对应的子数据立方模型，得到所述各个数据分片的数据处理结果，所述子数据立方模型用于对对应的数据分片进行数据处理；

将各个数据处理结果存储至所述数据立方模型中。

2.根据权利要求1所述的方法，其特征在于，所述数据立方模型包括键值计算层和数据分片层；

所述将所述待分发数据集输入数据立方模型，得到数据分片，包括：

将所述待分发数据集输入所述键值计算层，得到键值计算结果；

将所述键值计算结果输入所述数据分片层，确定出所述待分发数据集的目标数据分片数量；

通过所述数据分片层输出所述目标数据分片数量的数据分片。

3.根据权利要求2所述的方法，其特征在于，所述数据分片规则存储有所述键值计算结果与数据分片数量的映射关系；

所述将所述键值计算结果输入所述数据分片层，确定出所述待分发数据集的目标数据分片数量，包括：

将所述键值计算结果输入所述数据分片层；

根据所述键值计算结果与所述数据分片数量的映射关系，确定出所述待分发数据集的目标数据分片数量。

4.根据权利要求1至3任一所述的方法，其特征在于，所述将各个数据处理结果存储至所述数据立方模型中之后，所述方法还包括：

根据所述各个数据处理结果对所述数据立方模型的数据库信息和索引信息。

5.根据权利要求1至3任一所述的方法，其特征在于，所述将各个数据处理结果存储至所述数据立方模型中之后，所述方法还包括：

响应于接收到数据结果查询请求，从所述数据立方模型中调取所述数据处理结果。

6.根据权利要求1至3任一所述的方法，其特征在于，所述子数据立方模型包括至少一种构建元素，所述至少一种构建元素包括维度表、时间表、信息库、过滤表和聚合数据库；

所述方法还包括：

将待更新数据输入所述数据立方模型，并根据所述待更新数据生成至少一个更新任务，所述待更新数据用于对所述子数据立方模型的至少一种构建元素更新，其中，一个更新任务对应一个子数据立方模型的更新；

通过所述数据立方模型将各个更新任务发送至对应的子数据立方模型；

根据所述更新任务对所述子数据立方模型的所述至少一种构建元素更新。

7.一种数据处理装置，其特征在于，所述装置包括：

关联清除模块，用于将多表数据集进行多表关联清除操作，得到多维数据集，所述多表关联清除操作用于清除所述多表数据集间的冗余数据；

数据准备模块，用于对所述多维数据集进行排序处理和聚合处理，得到待分发数据集；

数据分片模块，用于将所述待分发数据集输入数据立方模型，得到数据分片，所述数据立方模型用于根据数据分片规则对所述待分发数据集进行分片处理；

数据处理模块，用于通过所述数据立方模型将各个数据分片分发至对应的子数据立方模型，得到所述各个数据分片的数据处理结果，所述子数据立方模型用于对对应的数据分片进行数据处理；

数据存储模块，用于将各个数据处理结果存储至所述数据立方模型中。

8.一种服务器，其特征在于，所述服务器包括处理器和存储器；所述存储器存储有至少一条指令，所述至少一条指令用于被所述处理器执行以实现如权利要求1至6任一所述的数据处理方法。

9.一种计算机可读存储介质，其特征在于，所述存储介质存储有至少一条指令，所述至少一条指令用于被处理器执行以实现如权利要求1至6任一所述的数据处理方法。