[发明专利]集群任务协调方法、系统和装置

权利要求书

1.一种集群任务协调方法，其特征在于，所述方法包括：

包含多个节点的集群启动时，zookeeper服务器从所述集群的各所述节点中确定一个主节点和多个从节点；

各所述节点向所述zookeeper服务器注册该节点待执行任务的任务信息，且所述主节点从所述zookeeper服务器获取各所述任务的任务信息，其中，所述任务信息包括该节点待执行任务的触发条件；

当所述主节点根据所述任务信息确定第一任务被触发时，所述主节点从各所述从节点中确定用于执行所述第一任务的至少一个第一从节点，其中，所述第一任务为在所述zookeeper服务器注册的任意一个任务；

所述主节点向所述第一从节点分配所述第一任务。

2.根据权利要求1所述的方法，其特征在于，所述任务信息包括任务类型信息，其中，所述任务类型包括独占任务和并行任务；

所述主节点从各所述从节点中确定用于执行所述第一任务的至少一个第一从节点，包括：

若所述第一任务为独占任务，则所述主节点从各所述从节点中确定用于执行所述第一任务的一个第一从节点；

若所述第一任务为并行任务，则所述第一任务包含多个子任务，所述主节点从各所述从节点中确定用于执行各所述子任务的多个第一从节点。

3.根据权利要求2所述的方法，其特征在于，所述方法还包括：

当所述主节点根据所述任务信息确定第一任务被触发时，所述主节点生成所述第一任务的会话，其中，所述会话用于监控所述第一任务的处理进程。

4.根据权利要求3所述的方法，其特征在于，所述任务信息还包 括该节点待执行任务耗时最大阈值；

所述方法还包括：

基于所述第一任务的会话，所述主节点获取所述第一任务的耗时长度；

当所述第一任务的耗时长度大于该第一任务耗时最大阈值时，所述会话标记所述第一任务超时。

5.根据权利要求4所述的方法，其特征在于，所述方法还包括：

当所述第一任务超时或失败时，所述主节点确定用于执行该第一任务的至少一个第二从节点；以及

所述主节点向所述第二从节点分配所述第一任务。

6.一种集群任务协调系统，其特征在于，所述系统包括：

zookeeper服务器，用于从所述集群的各节点中确定一个主节点和多个从节点，存储各所述节点待执行任务的任务信息，其中，所述任务信息包括该节点待执行任务的触发条件；

所述主节点，用于从所述zookeeper服务器获取各所述任务的任务信息，以及当确定任意一任务被触发时，将该任务分配到对应的至少一个从节点；

所述从节点，用于执行所述主节点分配的任务。

7.根据权利要求6所述的系统，其特征在于，所述主节点还用于生成所述任务的会话，根据所述会话确定处理超时或失败的任务，并为所述超时或失败的任务重新分配对应的从节点。

8.一种集群任务协调装置，其特征在于，所述装置包括：

主从节点确定模块，配置用于包含多个节点的集群启动时，zookeeper服务器从所述集群的各所述节点中确定一个主节点和多个从节点；

任务信息注册模块，配置用于各所述节点向所述zookeeper服务 器注册该节点待执行任务的任务信息，且所述主节点从所述zookeeper服务器获取各所述任务的任务信息，其中，所述任务信息包括该节点待执行任务的触发条件；

第一从节点确定模块，配置用于当所述主节点根据所述任务信息确定第一任务被触发时，所述主节点从各所述从节点中确定用于执行所述第一任务的至少一个第一从节点，其中，所述第一任务为在所述zookeeper服务器注册的任意一个任务；

第一任务分配模块，配置用于所述主节点向所述第一从节点分配所述第一任务。

9.根据权利要求8所述的装置，其特征在于，所述任务信息包括任务类型信息，其中，所述任务类型包括独占任务和并行任务；

所述第一从节点确定模块配置具体用于：

若所述第一任务为独占任务，则所述主节点从各所述从节点中确定用于执行所述第一任务的一个第一从节点；

若所述第一任务为并行任务，则所述第一任务包含多个子任务，所述主节点从各所述从节点中确定用于执行各所述子任务的多个第一从节点。