[发明专利]一种资源调度方法及系统

权利要求书

1.一种资源调度方法，其特征在于，包括：

根据客户端服务模块(Client)提交的任务，在节点管理模块(NodeManager)中创建用于管理所述任务的应用管理模块(AppMaster)和应用管理运行容器(AppMaster Container)；

通过所述应用管理模块(AppMaster)根据所述任务生成子任务；

分配对应所生成的子任务的计算资源，并根据所分配的计算资源建立线程，其中，一项子任务对应一个线程；

在各子任务各自对应的线程上运行子任务。

2.根据权利要求1所述的方法，其特征在于，所述分配对应所生成的子任务的计算资源，并根据所分配的计算资源建立线程，包括：

资源调度模块(ResourceManager)根据所生成的子任务向所述应用管理模块(AppMaster)分配计算资源，并根据所分配的计算资源建立线程。

3.根据权利要求2所述的方法，其特征在于，所述资源调度模块(ResourceManager)中，设置应用实例状态机、节点实例状态机和资源容器实例状态机，所述应用实例状态机对应了应用实例，所述节点实例状态机对应节点实例，所述资源容器实例状态机对应资源容器实例，各状态机根据接收到的事件变更状态。

4.根据权利要求1或2所述的方法，其特征在于，所述在各子任务各自对应的线程上运行子任务，包括：

启动与所述任务关联的节点管理模块中的应用管理运行容器，并运行各节点管理模块(NodeManager)中的任务执行模块(AppWorker)执行子任务，其中，一个任务执行模块用于对应一项子任务，并在这一项子任务对应的线程上运行。

5.根据权利要求3所述的方法，其特征在于，还包括：

所述资源调度模块(ResourceManager)将所述客户端服务模块(Client)提交的任务存储至分布式列式数据库(Hbase)，其中，针对所述资源调度模块(ResourceManager)所在集群(HA)，基于Zookeeper的分布式锁服务，通过领导者选举接口进行数据交互，并通过Apache Curator封装Zookeeper底层的应用程序编程接口(api)。

6.一种资源调度系统，其特征在于，包括：

资源调度模块(ResourceManager)，用于根据客户端服务模块(Client)提交的任务，在节点管理模块(NodeManager)中创建用于管理所述任务的应用管理模块(AppMaster)和应用管理运行容器(AppMaster Container)；

所述应用管理模块(AppMaster)，用于根据所述任务生成子任务；

所述资源调度模块(ResourceManager)，还用于分配对应所生成的子任务的计算资源，并根据所分配的计算资源建立线程，其中，一项子任务对应一个线程；以便于在各子任务各自对应的线程上运行子任务。

7.根据权利要求6所述的系统，其特征在于，所述资源调度模块(ResourceManager)，具体用于根据所生成的子任务向所述应用管理模块(AppMaster)分配计算资源，并根据所分配的计算资源建立线程。

8.根据权利要求7所述的系统，其特征在于，在所述资源调度模块(ResourceManager)中，设置有应用实例状态机、节点实例状态机和资源容器实例状态机，所述应用实例状态机对应了应用实例，所述节点实例状态机对应节点实例，所述资源容器实例状态机对应资源容器实例，各状态机根据接收到的事件变更状态。

9.根据权利要求6或7所述的系统，其特征在于，所述应用管理模块，还用于通知启动与所述任务关联的节点管理模块(NodeManager)中的应用管理运行容器；

所述节点管理模块(NodeManager)，用于运行任务执行模块(AppWorker)执行子任务，其中，一个任务执行模块用于对应一项子任务，并在这一项子任务对应的线程上运行。

10.根据权利要求8所述的系统，其特征在于，所述资源调度模块(ResourceManager)，还用于将所述客户端服务模块(Client)提交的任务存储至分布式列式数据库(Hbase)，其中，针对所述资源调度模块(ResourceManager)所在集群(HA)，基于Zookeeper的分布式锁服务，通过领导者选举接口进行数据交互，并通过Apache Curator封装Zookeeper底层的应用程序编程接口(api)。