[发明专利]弹性任务调度方法、装置、设备及计算机可读存储介质

权利要求书

1.一种弹性任务调度方法，其特征在于，包括：

响应于接收到的任务控制请求，将目标任务放入队列并检查队列中的任务；取出队列中的任务，读取所述任务所需的资源数值，并发出资源申请请求；

响应于所述资源申请请求，在资源池中检索是否存在空闲资源；所述资源池为映射到本地的平台的资源池；

当检索出资源池中存在空闲资源时，根据所述资源申请请求中记载的任务所需的资源数值分配空闲资源，其中，根据所述任务所需的资源数值对资源进行分片，建立资源分片与代理实例的关联关系，所述代理实例与资源实例一对一映射，所述代理实例为所述资源实例在本地的映射。

2.根据权利要求1所述的方法，其特征在于，还包括：

当检索出资源池中不存在空闲资源时，获取一个代理实例，并对所述代理实例所关联的资源虚拟数值化，针对所述任务所需的资源数值分配空闲资源，其中，空闲资源属于所述代理实例所关联的资源，所述代理实例与资源实例一对一映射。

3.根据权利要求1所述的方法，其特征在于，所述当检索出资源池中存在空闲资源时，根据所述资源申请请求中记载的任务所需的资源数值分配空闲资源，其中，根据所述任务所需的资源数值对资源进行分片，建立资源分片与代理实例的关联关系，所述代理实例与资源实例一对一映射，包括：

在资源池中检索空闲度最低且满足资源申请请求中记载的任务所需的资源数值的代理实例。

4.根据权利要求1或2所述的方法，其特征在于，还包括：

在针对所述任务所需的资源数值分配空闲资源后，响应于作业的提交向服务集群申请实际资源。

5.根据权利要求4所述的方法，其特征在于，所述在针对所述任务所需的资源数值分配空闲资源后，响应于作业的提交向服务集群申请实际资源，包括：

根据租户配置，对实际资源进行分组隔离，其中，可以将不同类型的任务提交到对应的资源实例，以根据业务属性进行资源隔离。

6.根据权利要求4所述的方法，其特征在于，还包括：

在释放资源时，根据所要释放的资源的标识找到与所要释放的资源关联的代理实例，以将所要释放的资源恢复为空闲资源。

7.根据权利要求1所述的方法，其特征在于，在响应于接收到的任务控制请求，将目标任务放入队列并检查队列中的任务之前，还包括：

对任务控制请求进行随机分发，以避免任务被集中于特定设备。

8.根据权利要求1所述的方法，其特征在于，所述资源是Spark资源。

9.一种弹性任务调度装置，其特征在于，包括：

任务调度模块，被配置为响应于接收到的任务控制请求，将目标任务放入队列并检查队列中的任务；取出队列中的任务，读取所述任务所需的资源数值，并发出资源申请请求；

资源检索模块，被配置为响应于所述资源申请请求，在资源池中检索是否存在空闲资源；所述资源池为映射到本地的平台的资源池；

弹性资源管理模块，被配置为当所述资源检索模块检索出资源池中存在空闲资源时，根据所述资源申请请求中记载的任务所需的资源数值分配空闲资源，其中，根据所述任务所需的资源数值对资源进行分片，建立资源分片与代理实例的关联关系，所述代理实例与资源实例一对一映射，所述代理实例为所述资源实例在本地的映射。

10.根据权利要求9所述的装置，其特征在于，弹性资源管理模块还被配置为：

当所述资源检索模块检索出资源池中不存在空闲资源时，获取一个代理实例，并对所述代理实例所关联的资源虚拟数值化，针对所述任务所需的资源数值分配空闲资源，其中，空闲资源属于所述代理实例所关联的资源，所述代理实例与资源实例一对一映射。

11.根据权利要求9所述的装置，其特征在于，所述弹性资源管理模块还被配置为：

在资源池中检索空闲度最低且满足资源申请请求中记载的任务所需的资源数值的代理实例。