[发明专利]一种数据分配方法和装置

权利要求书

1.一种数据分配方法，其特征在于，包括如下步骤：

S1、获取需要分析的多个数据；

S2、依据数据分析需求确定用于划分所述需要分析的多个数据的字段；

S3、针对每个数据，将步骤S2中确定出的字段对应的值与预先确定的计算结点的个数执行取模运算；

S4、将所述需要分析的多个数据中取模运算后的值相同的数据分入同一计算结点。

2.根据权利要求1所述的数据分配方法，其特征在于，所述步骤S1进一步包括：

将获取到的所述需要分析的多个数据处理成统一的格式。

3.根据权利要求1所述的数据分配方法，其特征在于，所述步骤S3具体包括：

S31、确定所述字段的类型；

S32、在所述字段为中文时，将该中文对应的国家标准代码值与预先确定的计算结点的个数执行取模运算；

S33、在所述字段为英文时，将该英文对应的ASCII码值与预先确定的计算结点的个数执行取模运算；

S34、在所述字段为数字时，将该数字对应的值与预先确定的计算结点的个数执行取模运算。

4.根据权利要求3所述的数据分配方法，其特征在于，所述步骤S3具体包括：

选取所述字段对应的值的一部分值与预先确定的计算结点的个数执行取模运算。

5.根据权利要求1所述的数据分配方法，其特征在于，所述计算结点为数据处理终端或数据处理终端上的线程。

6.一种数据分配装置，其特征在于，包括：

数据获取模块，用于获取需要分析的多个数据；

字段确定模块，用于依据数据分析需求确定用于划分所述需要分析的多个数据的字段；

取模运算模块，用于针对每个数据，将所述字段确定模块确定出的字段对应的值与预先确定的计算结点的个数执行取模运算；

数据分配模块，用于将所述需要分析的多个数据中取模运算后的值相同的数据分入同一计算结点。

7.根据权利要求6所述的数据分配装置，其特征在于，所述数据获取模块进一步将获取到的所述需要分析的多个数据处理成统一的格式。

8.根据权利要求6所述的数据分配装置，其特征在于，所述取模运算模块具体包括：

字段类型确定子模块，用于确定所述字段的类型；

中文取模运算子模块，用于在所述字段为中文时，将该中文对应的国家标准代码值与预先确定的计算结点的个数执行取模运算；

英文取模运算子模块，用于在所述字段为英文时，将该英文对应的ASCII码值与预先确定的计算结点的个数执行取模运算；

数字取模运算子模块，用于在所述字段为数字时，将该数字对应的值与预先确定的计算结点的个数执行取模运算。

9.根据权利要求6所述的数据分配装置，其特征在于，所述取模运算模块进一步选取所述字段对应的值的一部分值与预先确定的计算结点的个数执行取模运算。

10.根据权利要求6所述的数据分配装置，其特征在于，所述计算结点为数据处理终端或数据处理终端上的线程。