[发明专利]集群资源调度方法、装置、介质和计算设备在审
申请号: | 202010471863.2 | 申请日: | 2020-05-28 |
公开(公告)号: | CN111625339A | 公开(公告)日: | 2020-09-04 |
发明(设计)人: | 段亦涛;张广勇 | 申请(专利权)人: | 网易有道信息技术(北京)有限公司 |
主分类号: | G06F9/48 | 分类号: | G06F9/48;G06F9/50 |
代理公司: | 中科专利商标代理有限责任公司 11021 | 代理人: | 吕朝蕙 |
地址: | 100084 北京市海淀区西北*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 集群 资源 调度 方法 装置 介质 计算 设备 | ||
1.一种集群资源调度方法,所述集群包括至少两个计算组,每个计算组包括至少一个计算分区;所述方法包括:
获取针对所述至少两个计算组中第一计算组的待执行作业;
确定所述至少两个计算组中各计算组的剩余资源及所述第一计算组已被使用资源的使用信息;
根据所述第一计算组的剩余资源、所述使用信息及执行所述待执行作业所需的目标资源,确定是否向所述待执行作业分配所述第一计算组的资源;
在确定不向所述待执行作业分配所述第一计算组的资源的情况下,确定所述至少两个计算组中第二计算组的剩余资源是否满足所述目标资源;以及
在所述第二计算组的剩余资源满足所述目标资源的情况下,向所述待执行作业分配所述第二计算组的资源。
2.根据权利要求1所述的方法,其中,所述确定是否向所述待执行作业分配所述第一计算组的资源包括:
在所述第一计算组的剩余资源满足所述目标资源的情况下,确定向所述待执行作业分配所述第一计算组的资源;
在所述第一计算组的剩余资源不满足所述目标资源的情况下,根据所述使用信息确定是否向所述待执行作业分配所述第一计算组的资源。
3.根据权利要求2所述的方法,其中,所述根据所述使用信息确定是否向所述待执行作业分配所述第一计算组的资源包括:
在所述使用信息表征所述已被使用资源被目标作业占用的情况下,确定所述已被使用资源中被所述目标作业占用的资源;
在被所述目标作业占用的资源与所述第一计算组的剩余资源的总和满足所述目标资源的情况下,确定向所述待执行作业分配所述第一计算组的资源,
其中,所述目标作业为所述至少两个计算组中除所述第一计算组外的其他组所针对的作业。
4.根据权利要求3所述的方法,还包括在被所述目标作业占用的资源与所述第一计算组的剩余资源的总和满足所述目标资源的情况下:
释放所述已被使用资源中被所述目标作业占用的资源,以向所述待执行作业分配所述第一计算组的资源。
5.根据权利要求4所述的方法,其中,在所述目标作业为多个的情况下,释放所述已被使用资源中被所述目标作业占用的资源包括:
确定多个目标作业的优先级;
根据所述多个目标作业的优先级及预定策略,确定所述多个目标作业中的待释放作业;以及
释放所述已被使用资源中被所述待释放作业占用的资源,以使得被释放的资源与所述第一计算组的剩余资源的总和满足所述目标资源。
6.根据权利要求5所述的方法,其中,所述根据所述多个目标作业的优先级及预定策略,确定所述多个目标作业中的待释放作业包括:
确定所述已被使用资源中被所述多个目标作业中各目标作业占用的资源;
确定所述各目标作业占用的资源与所述第一计算组的剩余资源的总和,得到针对各目标作业的资源总和;
根据优先级自低至高,依次确定针对各目标作业的资源总和是否能够满足所述目标资源,直至确定得到满足所述目标资源的资源总和;以及
确定满足所述目标资源的资源总和所针对的目标作业为所述待释放作业。
7.根据权利要求6所述的方法,其中,所述根据所述多个目标作业的优先级及预定策略,确定所述多个目标作业中的待释放作业还包括:
在针对各目标作业的资源总和均不能满足所述目标资源的情况下,根据所述优先级自低至高,依次累加各目标作业占用的资源,直至当前累加得到的占用的资源与所述第一计算组的剩余资源总和能够满足所述目标资源;以及
确定当前累加得到的占用的资源所针对的目标作业为所述待释放作业。
8.根据权利要求4所述的方法,还包括:
根据所述目标作业所针对的第三计算组的剩余资源及执行所述目标作业所需的资源,向所述目标作业重新分配资源。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于网易有道信息技术(北京)有限公司,未经网易有道信息技术(北京)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010471863.2/1.html,转载请声明来源钻瓜专利网。