[发明专利]数据处理方法、数据处理装置和电子设备

权利要求书

1.一种数据处理方法，其特征在于，包括：

根据待处理的异构化数据的属性信息进行等级划分处理得到多个数据等级，其中，所述异构化数据由多组数据构成，各数据等级对应的数据量大小不同；

对每一个所述数据等级生成对应的一个映射关系，并将属于相同数据等级的各组数据基于该数据等级对应的映射关系进行存储；

判断是否存在需要进行调整的数据等级，并对需要进行调整的数据等级对应的映射关系进行调整。

2.根据权利要求1所述的数据处理方法，其特征在于，所述判断是否存在需要进行调整的数据等级，并对需要进行调整的数据等级对应的映射关系进行调的步骤，包括：

判断是否存在需要进行调整的数据等级；

若存在需要进行调整的数据等级，则判断是否需要重新进行等级划分处理；

若需要重新进行等级划分处理，则根据重新划分得到的数据等级生成对应的映射关系。

3.根据权利要求2所述的数据处理方法，其特征在于，所述根据重新划分得到的数据等级生成对应的映射关系的步骤，具体为：

根据重新划分得到的数据等级和一致性哈希算法生成对应的映射关系。

4.根据权利要求1-3任意一项所述的数据处理方法，其特征在于，所述根据待处理的异构化数据的属性信息进行等级划分处理得到多个数据等级的步骤，包括：

针对待处理的异构化数据中的每一组数据，获取该组数据中各子数据具有的数据类型和每一种数据类型对应的子数据的数量，其中，每一组数据包括多个子数据；

根据所述数据类型和每一种数据类型对应的子数据的数量进行等级划分处理得到多个数据等级。

5.根据权利要求4所述的数据处理方法，其特征在于，所述根据所述数据类型和每一种数据类型对应的子数据的数量进行等级划分处理得到多个数据等级的步骤，具体为：

根据所述数据类型、每一种数据类型对应的子数据的数量和一预设数量进行划分处理得到预设数量个数据等级。

6.一种数据处理装置，其特征在于，包括：

数据等级划分模块，用于根据待处理的异构化数据的属性信息进行等级划分处理得到多个数据等级，其中，所述异构化数据由多组数据构成，各数据等级对应的数据量大小不同；

数据存储模块，用于对每一个所述数据等级生成对应的一个映射关系，并将属于相同数据等级的各组数据基于该数据等级对应的映射关系进行存储；

映射关系调整模块，用于判断是否存在需要进行调整的数据等级，并对需要进行调整的数据等级对应的映射关系进行调整。

7.根据权利要求6所述的数据处理装置，其特征在于，所述映射关系调整模块包括：

等级调整判断子模块，用于判断是否存在需要进行调整的数据等级；

等级划分判断子模块，用于在存在需要进行调整的数据等级时，判断是否需要重新进行等级划分处理；

映射关系生成子模块，用于在需要重新进行等级划分处理时，根据重新划分得到的数据等级生成对应的映射关系。

8.根据权利要求7所述的数据处理装置，其特征在于，所述映射关系生成子模块具体用于：

根据重新划分得到的数据等级和一致性哈希算法生成对应的映射关系。

9.根据权利要求6-8任意一项所述的数据处理装置，其特征在于，所述数据等级划分模块包括：

属性信息获取子模块，用于针对待处理的异构化数据中的每一组数据，获取该组数据中各子数据具有的数据类型和每一种数据类型对应的子数据的数量，其中，每一组数据包括多个子数据；

数据等级划分子模块，用于根据所述数据类型和每一种数据类型对应的子数据的数量进行等级划分处理得到多个数据等级。

10.一种电子设备，其特征在于，包括存储器、处理器以及存储于该存储器并能够在该处理器上运行的计算机程序，该计算机程序运行时实现权利要求1-5任意一项所述的数据处理方法。