[发明专利]资源分配方法及设备有效
申请号: | 201711050085.4 | 申请日: | 2017-10-31 |
公开(公告)号: | CN109726008B | 公开(公告)日: | 2022-12-09 |
发明(设计)人: | 张杨;冯亦挥;欧阳晋;韩巧焕;汪方 | 申请(专利权)人: | 阿里巴巴集团控股有限公司 |
主分类号: | G06F9/50 | 分类号: | G06F9/50 |
代理公司: | 广州铸智知识产权代理有限公司 44886 | 代理人: | 孙丹丹 |
地址: | 英属开曼群岛大开*** | 国省代码: | 暂无信息 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 资源 分配 方法 设备 | ||
1.一种资源分配方法,应用于资源调度器为作业节点分配机器节点过程中,其中,所述方法包括:
获取作业节点申请的资源量和GPU卡型号的偏好,所述GPU卡型号的偏好包括GPU卡型号的候选集及所述候选集中各GPU卡型号的优先级顺序;
获取各机器节点的剩余资源和GPU卡型号;
记录所有的GPU卡型号和每个GPU卡型号下的所有机器节点;
根据所述各机器节点对应的剩余资源和所述记录的GPU集群中所有的GPU卡型号和每个GPU卡型号下的所有机器节点、所述申请的资源量、GPU卡型号的候选集及所述候选集中各GPU卡型号的优先级顺序,为所述作业节点分配满足所述申请的资源量和GPU卡型号偏好的机器节点。
2.根据权利要求1所述的方法,其中,为所述作业节点分配满足所述申请的资源量和GPU卡型号偏好的机器节点之后,还包括:
向作业管理器通知为所述作业节点分配的满足所述申请的资源量和GPU卡型号偏好的机器节点。
3.根据权利要求1所述的方法,其中,根据所述各机器节点对应的剩余资源和所述记录的GPU集群中所有的GPU卡型号和每个GPU卡型号下的所有机器节点、所述申请的资源量、GPU卡型号的候选集及所述候选集中各GPU卡型号的优先级顺序,为所述作业节点分配满足所述申请的资源量和GPU卡型号偏好的机器节点,包括:
将所述记录的所有的GPU卡型号与所述申请的GPU卡型号的候选集进行交集处理,所述交集中的GPU卡型号的优先级顺序对应于所述候选集中各GPU卡型号的优先级顺序;
按所述交集中的GPU卡型号的优先级顺序遍历所述交集中的每一个GPU卡型号,直至遍历结束,或者直至当前遍历到的GPU卡型号下的所有机器节点的资源剩余总量大于等于申请的机器节点的资源量,则遍历提前结束,为所述作业节点分配当前遍历到的GPU卡型号下的机器节点。
4.根据权利要求3所述的方法,其中,所述遍历结束或遍历提前结束之后,还包括:
判断是否已经为所述作业节点分配当前遍历到的GPU卡型号下的机器节点,
若否,按所述交集中的GPU卡型号的优先级顺序遍历所述交集中的每一个GPU卡型号,直至遍历结束,或者直至遍历到所述交集中所有符合条件的GPU卡型号,则所述遍历提前结束,所述符合条件的GPU卡型号为该GPU卡型号下的所有机器节点的资源总量大于等于申请的机器节点的资源量,从所有符合条件的GPU卡型号中选择剩余资源总量最多的GPU卡型号,为所述作业节点分配所述选择的GPU卡型号下的机器节点。
5.根据权利要求4所述的方法,其中,所述遍历结束或遍历提前结束之后,还包括:
判断是否已经为所述作业节点分配所述选择的GPU卡型号下的机器节点,
若否,通知所述管理器所属的作业节点分配失败。
6.一种资源分配方法,应用于作业管理器为作业节点分配机器节点的过程中,其中,该方法包括:
确定待分配资源的作业节点;
为所述作业节点确定申请的资源量和GPU卡型号的偏好,所述GPU卡型号的偏好包括GPU卡型号的候选集及所述候选集中各GPU卡型号的优先级顺序;
将所述为所述作业节点确定申请的资源量和GPU卡型号的偏好发送至资源调度器,以便所述资源调度器在获取各机器节点的剩余资源和GPU卡型号,并记录所有的GPU卡型号和每个GPU卡型号下的所有机器节点后,根据所述各机器节点对应的剩余资源和所述记录的GPU集群中所有的GPU卡型号和每个GPU卡型号下的所有机器节点、所述申请的资源量、GPU卡型号的候选集及所述候选集中各GPU卡型号的优先级顺序,为所述作业节点分配满足所述申请的资源量和GPU卡型号偏好的机器节点。
7.根据权利要求6所述的方法,其中,将所述为所述作业节点确定申请的资源量和GPU卡型号的偏好发送至资源调度器之后,还包括:
从资源调度器接收为所述作业节点分配的满足所述申请的资源量和GPU卡型号偏好的机器节点。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于阿里巴巴集团控股有限公司,未经阿里巴巴集团控股有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201711050085.4/1.html,转载请声明来源钻瓜专利网。