[发明专利]一种基于节点能力的数据分配处理方法及装置

权利要求书

1.一种基于节点能力的数据分配处理方法，其特征在于，所述方法应用于具有若干处理节点的数据分配处理系统中，所述数据分配处理系统包括负载均衡节点，所述方法包括：

所述负载均衡节点响应于针对目标数据的第一数据处理请求，根据所述第一数据处理请求，从所有所述处理节点中确定出预选处理节点组；所述预选处理节点组包括一个或多个预选处理节点；

确定所述预选处理节点组中每个所述预选处理节点的基础能力，其中，每个所述预选处理节点的基础能力至少包括每个所述预选处理节点对应的处理能力和负载能力；

根据每个所述预选处理节点的基础能力，从所述预选处理节点组中确定出目标处理节点组；其中，所述目标处理节点组包括一个或多个目标处理节点；

分配所述目标数据至所述目标处理节点组进行处理；

所述根据每个所述预选处理节点的基础能力，从所述预选处理节点组中确定出目标处理节点组，包括：

根据每个所述预选处理节点的基础能力的排序情况，维护一个或多个优先级队列，从所述预选处理节点组中选取优先级队列依次取得排序靠前的预选处理节点组成目标处理节点组；

在所述根据每个所述预选处理节点的基础能力，从所述预选处理节点组中确定出目标处理节点组之后，所述方法还包括：

判断所述第一数据处理请求的数据来源是否来自所述数据分配处理系统，当判断出所述数据来源不是来自所述数据分配处理系统时，根据所述目标处理节点组的基础能力，对所述目标数据进行切分处理；

在所述分配所述目标数据至目标处理节点组进行处理之后，所述方法还包括：

监测针对每个目标处理节点对其对应处理的切分数据的预计处理时长，当判断出所述目标处理节点针对其对应处理的切分数据的预计处理时长超过预设阈值时，则触发执行回调处理机制。

2.根据权利要求1所述的基于节点能力的数据分配处理方法，其特征在于，所述确定所述预选处理节点组中每个所述预选处理节点的基础能力，包括：

确定所述预选处理节点组中每个所述预选处理节点对应的处理能力和负载能力，以及所述处理能力和所述负载能力分别对应的加权权重，并对每个所述预选处理节点对应的所述处理能力和所述负载能力进行加权计算，得到每个所述预选处理节点的基础能力。

3.根据权利要求2所述的基于节点能力的数据分配处理方法，其特征在于，所述确定所述预选处理节点组中每个所述预选处理节点对应的处理能力，包括：

对于所述预选处理节点组中任一所述预选处理节点，确定该预选处理节点在所述数据分配处理系统中的第一权重系数；

根据该预选处理节点的第一权重系数，计算该预选处理节点对应的处理能力，其中计算公式为：

其中，X_k为该预选处理节点的处理能力，T_k为该预选处理节点当前的任务数，α_k该预选处理节点的第一权重系数。

4.根据权利要求3所述的基于节点能力的数据分配处理方法，其特征在于，所述确定该预选处理节点在所述数据分配处理系统中的第一权重系数，包括：

确定所述数据分配处理系统中所有所述处理节点的历史数据；

根据所述历史数据计算该预选处理节点的第一权重系数的计算公式为：

其中，α_k为该预选处理节点的第一权重系数；C_kj为该预选处理节点中第j个处理单元处理数据的历史次数，D_kj为该预选处理节点中第j个处理单元的处理能力，m为该预选处理节点中处理单元的总数，n为所述数据分配处理系统中处理节点的总数。

5.根据权利要求2所述的基于节点能力的数据分配处理方法，其特征在于，所述确定所述预选处理节点组中每个所述预选处理节点对应的负载能力，包括：

对于所述预选处理节点组中任一所述预选处理节点，确定该预选处理节点中每个硬件负载的当前使用率以及每个硬件资源的第二权重系数，并对该预选处理节点在其对应的所述硬件资源的当前使用率进行加权计算，得到该预选处理节点的负载能力。