[发明专利]数据处理方法及其装置、电子设备和介质

权利要求书

1.一种用于服务器集群的数据处理方法，所述服务器集群包括多个服务器，所述多个服务器共享数据存储空间，所述方法包括：

接收来自客户端的处理请求，所述处理请求用于指示处理批量数据；

分解所述批量数据，以得到多个待处理子任务；

基于所述数据存储空间存储的各服务器的资源占用情况，确定所述服务器集群中的目标服务器；以及

将所述待处理子任务分配给所述目标服务器，以使所述目标服务器处理所述待处理子任务。

2.根据权利要求1所述的方法，其中，所述分解所述批量数据，以得到多个待处理子任务包括：

获取所述批量数据的数据量和所述批量数据中各条数据的标识；

针对所述集群服务器，获取数据处理的数据量限额；

基于所述批量数据的数据量和所述数据量限额，确定待处理子任务的数量；以及

按照所述待处理子任务的数量，分解所述批量数据中各条数据的标识，以得到多个待处理子任务。

3.根据权利要求1所述的方法，其中，所述方法还包括：

将所述多个待处理子任务存储在所述所述数据存储空间。

4.根据权利要求1所述的方法，其中，所述基于所述数据存储空间存储的各服务器的资源占用情况，确定所述服务器集群中的目标服务器包括：

针对每个待处理子任务，获取所述待处理子任务的处理状态；

基于所述处理状态，获取所述数据存储空间存储的各服务器的资源占用情况；以及

基于所述各服务器的资源占用情况，从所述服务器集群中选择资源占用情况符合预设规则的目标服务器。

5.根据权利要求1所述的方法，其中，所述处理状态包括以下至少之一：

等待状态；

运行状态；

完成状态。

6.根据权利要求4所述的方法，其中，所述方法还包括：

在所述待处理子任务的处理状态发生改变的情况下，更新所述待处理子任务的处理状态。

7.根据权利要求1所述的方法，其中，所述方法还包括：

针对每个待处理子任务，获取对应分配的目标服务器的标识信息；以及

将所述目标服务器的标识信息存储在所述所述数据存储空间。

8.根据权利要求1所述的方法，其中，所述方法还包括：

基于所述目标服务器的标识信息，从所述数据存储空间读取分配到所述目标服务器的待处理子任务；

在所述待处理子任务处理完成后，控制所述目标服务器处于中断状态；以及

在所述中断状态达到预设时长后，再次从所述数据存储空间读取分配到所述目标服务器的待处理子任务。

9.根据权利要求1所述的方法，其中，所述分解所述批量数据包括：

检测所述批量数据是否符合分解条件；以及

在所述批量数据符合所述分解条件的情况下，分解所述批量数据。

10.一种用于服务器集群的数据处理装置，所述服务器集群包括多个服务器，所述多个服务器共享数据存储空间，所述装置包括：

接收模块，被配置为接收来自客户端的处理请求，所述处理请求用于指示处理批量数据；

分解模块，被配置为分解所述批量数据，以得到多个待处理子任务；

确定模块，被配置为基于所述数据存储空间存储的各服务器的资源占用情况，确定目标服务器；以及

分配模块，被配置为将所述待处理子任务分配给所述目标服务器，以使所述目标服务器处理所述待处理子任务。

11.一种电子设备，包括：

一个或多个处理器；以及

存储器，用于存储一个或多个程序，

其中，当所述一个或多个程序被所述一个或多个处理器执行时，使得所述一个或多个处理器实现权利要求1至9中任一项所述的方法。

12.一种计算机可读存储介质，存储有计算机可执行指令，所述指令在被执行时用于实现权利要求1至9中任一项所述的方法。