[发明专利]任务调度方法和装置、以及集群管理系统在审
申请号: | 202010997982.1 | 申请日: | 2020-09-21 |
公开(公告)号: | CN112114950A | 公开(公告)日: | 2020-12-22 |
发明(设计)人: | 杨清强;吕文栋;薛佳梅 | 申请(专利权)人: | 中国建设银行股份有限公司 |
主分类号: | G06F9/48 | 分类号: | G06F9/48;G06F9/50 |
代理公司: | 中原信达知识产权代理有限责任公司 11219 | 代理人: | 王安娜;王志远 |
地址: | 100033 *** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 任务 调度 方法 装置 以及 集群 管理 系统 | ||
1.一种任务调度方法,其特征在于,包括:
接收任务调度请求,根据所述任务调度请求,获取大数据运行任务,将所述大数据运行任务划分为至少一个子任务;
生成所述至少一个子任务对应的任务调度表,按照所述任务调度表,将所述至少一个子任务分发到至少一个目标Kubernets集群,其中,所述至少一个目标Kubernets集群为多个Kubernets集群中的集群;
在所述至少一个目标Kubernets集群运行所述至少一个子任务后,获取所述至少一个目标Kubernets集群返回的子任务运行结果。
2.根据权利要求1所述的方法,其特征在于,所述生成所述至少一个子任务对应的任务调度表,包括:
获取每个子任务的资源需求数据,按照所述每个子任务的资源需求数据从大到小的顺序,对所述至少一个子任务进行排序;
根据所述至少一个子任务的排序,确定所述每个子任务对应的目标Kubernets集群,以生成所述至少一个子任务对应的任务调度表。
3.根据权利要求2所述的方法,其特征在于,所述确定所述每个子任务对应的目标Kubernets集群,包括:
获取所述多个Kubernets集群的资源数据;
根据所述多个Kubernets集群的资源数据和所述每个子任务的资源需求数据,从所述多个Kubernets集群中选择出所述每个子任务对应的目标Kubernets集群。
4.根据权利要求3所述的方法,其特征在于,所述多个Kubernets集群的资源数据包括:每个Kubernets集群的可用资源数据和每个Kuber nets集群的负载值;以及,
所述根据所述多个Kubernets集群的资源数据和所述每个子任务的资源需求数据,从所述多个Kubernets集群中选择出所述每个子任务对应的目标Kubernets集群,包括:
从所述多个Kubernets集群中,将可用资源数据不大于所述每个子任务的资源需求数据的Kubernets集群过滤掉,得到所述每个子任务对应的至少一个可选Kubernets集群;
对所述至少一个可选Kubernets集群进行优先级排序,确定排序最前的Kubernets集群为所述每个子任务对应的目标Kubernets集群。
5.根据权利要求4所述的方法,其特征在于,所述对所述至少一个可选Kubernets集群进行优先级排序,包括:
基于可用资源数据的权重值和负载值的权重值,根据所述至少一个可选Kubernets集群中每个可选Kubernets集群的可用资源数据和所述每个可选Kubernets集群的负载值,计算所述每个可选Kubernets集群的优先级分数;
按照从高到低的顺序,根据所述每个可选Kubernets集群的优先级分数,对所述至少一个可选Kubernets集群进行排序。
6.根据权利要求3所述的方法,其特征在于,在从所述多个Kube rnets集群中选择出所述每个子任务对应的目标Kubernets集群之后,所述方法还包括:
更新所述目标Kubernets集群的资源数据。
7.根据权利要求1所述的方法,其特征在于,在生成所述至少一个子任务对应的任务调度表之前,所述方法还包括:
将工作状态为不可用的Kubernets集群从所述多个Kubernets集群中过滤掉。
8.根据权利要求1所述的方法,其特征在于,在获取大数据运行任务之后,所述方法还包括:
格式化处理所述大数据运行任务,以完成所述大数据运行任务的格式校验。
9.根据权利要求1所述的方法,其特征在于,所述将所述大数据运行任务划分为至少一个子任务,包括:
获取所述大数据运行任务对应的任务结果维度;
根据所述任务结果维度,对所述大数据运行任务进行划分,得到所述至少一个子任务。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中国建设银行股份有限公司,未经中国建设银行股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010997982.1/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种化妆品瓶丝印加热装置
- 下一篇:一种数控机床散热降温高温保护装置