[发明专利]一种在分布式系统中计算资源的方法与设备

权利要求书

1.一种在分布式系统中计算资源的方法，其中，所述方法包括：

获取分布式系统中目标任务及其对应的一个或多个目标资源信息，其中，所述目标资源信息包括资源规格信息；所述资源规格信息包括：通过规格化处理获得的、体现资源在实际应用中对应的业务属性的信息；所述目标任务包括：系统发布的与资源计算相关的任务信息；

将所述目标任务调度至相对应的目标数据节点；

利用所述目标数据节点按所述资源规格信息对应的一个或多个资源规格维度将所述目标任务分解为多个任务队列，其中，每个任务队列对应一个资源规格维度；

并行执行所述多个任务队列。

2.根据权利要求1所述的方法，其中，所述方法还包括：

获取分布式系统中物理节点的节点资源信息；

对所述节点资源信息进行规格化处理以获得对应的规格化资源信息；

其中，所述获取分布式系统中目标任务及其对应的一个或多个目标资源信息，其中，所述目标资源信息包括资源规格信息包括：

获取所述分布式系统中目标任务；

从所述规格化资源信息中确定所述目标任务对应的一个或多个目标资源信息，其中，所述目标资源信息包括资源规格信息。

3.根据权利要求1所述的方法，其中，所述目标资源信息还包括资源节点信息；

其中，所述将所述目标任务调度至相对应的目标数据节点包括：

将所述目标任务调度至与所述资源节点信息相匹配的目标数据节点。

4.根据权利要求3所述的方法，其中，所述利用所述目标数据节点按所述资源规格信息对应的一个或多个资源规格维度并行处理所述目标任务包括：

利用所述目标数据节点按所述资源节点信息中的区域维度及所述资源规格信息对应的一个或多个资源规格维度并行处理所述目标任务。

5.根据权利要求1所述的方法，其中，所述将所述目标任务调度至相对应的目标数据节点包括：

获取一个或多个数据节点的当前任务快照信息；

根据所述当前任务快照信息将所述目标任务调度至对应的目标数据节点。

6.根据权利要求5所述的方法，其中，所述根据所述当前任务快照信息将所述目标任务调度至对应的目标数据节点包括：

根据所述当前任务快照信息确定所述数据节点当前对应的成功处理任务数；

根据所述分布式系统中每个数据节点的平均任务负荷数与所述数据节点当前对应的成功处理任务数，将所述目标任务调度至对应的目标数据节点。

7.根据权利要求1所述的方法，其中，所述利用所述目标数据节点按所述资源规格信息对应的一个或多个资源规格维度并行处理所述目标任务还包括：

在所述多个任务队列的执行过程中，利用已执行完成的任务队列的执行线程执行所述多个任务队列中其他未完成任务队列中的待执行任务。

8.根据权利要求7所述的方法，其中，所述在所述多个任务队列的执行过程中，利用已执行完成的任务队列的执行线程执行所述多个任务队列中其他未完成任务队列中的待执行任务包括：

在所述多个任务队列的执行过程中，利用已执行完成的任务队列的执行线程从所述多个任务队列中其他未完成任务队列中反向获取待执行任务；

利用所述执行线程执行所获取的所述待执行任务。

9.根据权利要求1至8中任一项所述的方法，其中，所述方法还包括：

将所述目标任务对应的执行结果缓存于与资源区域信息相对应的缓存模块。