[发明专利]数据处理方法、装置、存储介质及终端

权利要求书

1.一种数据处理方法，其特征在于，包括：

确定待处理数据的数据类型；其中，所述数据类型包括业务单表数据和业务分库分表数据；

根据所述数据类型确定与所述待处理数据对应的数据分片策略；

根据所述数据分片策略对所述待处理数据进行分片，生成分片数据库；

对所述分片数据库中的待处理数据进行并行处理；

当所述数据类型为业务单表数据时，所述数据分片策略为多分片分页策略；

根据所述数据分片策略对所述待处理数据进行分片，生成分片数据库，包括：

根据所述待处理数据的第一数据总数及预先设定的每页处理数据的第一数据条数确定分页库总数；

按照第一预设规则将所述待处理数据分配到各个分页库中，并对所述各个分页库标记页码；

根据所述分页库总数及预先设定的第一分片库总数确定每个分片库处理数据的数据页数；

按照第二预设规则将所述分页库分配到各个第一分片库中；其中，每个第一分片库中包含数据页数个分页库；

当所述数据类型为业务分库分表数据时，所述数据分片策略为多分片分表策略；

根据所述数据分片策略对所述待处理数据进行分片，生成分片数据库，包括：

根据所述待处理数据的第二数据总数及预先设定的每个表处理数据的第二数据条数确定分表库总数；

按照第三预设规则将所述待处理数据分配到各个分表库中，并对所述各个分表库标记表码；

根据分表库总数及预先设定的第二分片库总数确定每个分片库处理数据的数据表数；

按照第四预设规则将所述分表库分配到各个第二分片库中；其中，每个第二分片库中包含数据表数个分表库。

2.根据权利要求1所述的方法，其特征在于，在根据所述数据类型确定与所述待处理数据对应的数据分片策略之前，包括：

获取预先设定的数据类型与数据分片策略的对应关系表；

根据所述数据类型确定与所述待处理数据对应的数据分片策略，包括：

根据所述数据类型和所述对应关系表确定与所述待处理数据对应的数据分片策略。

3.根据权利要求1所述的方法，其特征在于，所述第二预设规则包括：

遍历所有分页库，用当前分页库对应的页码除以所述第一分片库总数，计算第一余数；

当所述第一余数与当前第一分片库的序号相同时，将所述当前分页库分配到所述当前第一分片库内。

4.根据权利要求1所述的方法，其特征在于，所述第四预设规则包括：

遍历所有分表库，用当前分表库对应的表码除以第二分片总数，计算第二余数；

当所述第二余数与当前第二分片库的序号相同时，将所述当前分表库分配到所述当前第二分片库内。