[发明专利]一种面向应用集群的队列任务调度方法及系统

权利要求书

1.一种面向应用集群的队列任务调度方法，其特征在于，包括以下步骤：

S1：对创建的线下任务对象进行打分，计算当前任务得分，将计算结果保存至数据库中；

S2：查询Kubernetes集群中的job资源等待队列是否为null，如果是，执行S3；如果不是，执行S4；

S3：提交任务到Kubernetes集群中，并按得到的任务分数插入到运行队列中，任务开始运行，同时实时监控集群中队列任务的动态变化，并基于动态变化进行实时调整；

S4：获取job资源等待队列中任务的最大得分，并与当前的任务分数进行比较，如果大于当前任务得分，执行S5；如果小于当前任务得分，执行S6；

S5：修改当前任务暂停状态为True，并将当前任务插入至暂停队列中；

S6：计算当前运行队列中，分数小于当前任务的所有任务所占资源的总和，判断得出的资源总和是否满足当前任务，如果不满足，执行S5；如果满足，执行S7；

S7：修改当前任务的暂停状态为false，修改运行队列中任务的暂停状态为True；

将运行队列中修改后的任务插入到暂停队列中，将修改后的当前任务插入到Kubernetes集群中的运行队列中。

2.根据权利要求1所述的一种面向应用集群的队列任务调度方法，其特征在于，所述S1中还包括以下步骤：

将创建的线下任务对象进行反序列化为JSON字符串对象，并存储至Redis数据库中，计算当前任务得分，计算结果也存储至Redis数据库中。

3.根据权利要求1所述的一种面向应用集群的队列任务调度方法，其特征在于，所述S1中计算当前任务得分的方法包括以下步骤：

依次计算优先级维度得分、累计暂停次数维度分数、累计暂停时间维度分数和训练任务完成度维度分数；

将四个维度的分值进行权重汇总，获得总得分。

4.根据权利要求3所述的一种面向应用集群的队列任务调度方法，其特征在于，所述优先级维度得分基于公式(1)计算：

y₁＝x*10 (1)

其中，x表示优先级；10表示优先级每一级的分数，优先级的等级分为1-10，优先级分数总值为10-100；

所述累计暂停次数维度分数基于公式(2)计算得到：

其中，x表示暂停次数；

所述累计暂停时间维度分数基于公式(3)得到：

其中，x表示该任务累计暂停时间，单位为分钟；

所述训练任务完成度维度分数基于公式(4)-(5)得到：

y₄＝t³*100 (5)

其中x₁表示训练任务累计执行时间，x₂表示总预估执行时间，x₃表示累计执行epoch次数；x₄表示总的epoch次数；

所述将四个维度的分值进行权重汇总基于公式(6)计算得到：

y＝w₁*y₁+w₂*y₂+w₃*y₃+w₄*y₄ (6)

其中，w₁表示优先级维度的权重；w₂表示累计暂停次数维度权重；w₃表示累计暂停时间维度权重；w₄表示训练任务完成度维度权重。