[发明专利]一种资源调度方法、装置、设备及计算机可读存储介质有效
申请号: | 202011410728.3 | 申请日: | 2020-12-03 |
公开(公告)号: | CN112416599B | 公开(公告)日: | 2023-03-24 |
发明(设计)人: | 查冲 | 申请(专利权)人: | 腾讯科技(深圳)有限公司 |
主分类号: | G06F9/50 | 分类号: | G06F9/50 |
代理公司: | 北京派特恩知识产权代理有限公司 11270 | 代理人: | 刘晖铭;张颖玲 |
地址: | 518000 广东省深圳*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 资源 调度 方法 装置 设备 计算机 可读 存储 介质 | ||
1.一种资源调度方法,其特征在于,包括:
响应于网络模型的训练任务请求,从缓存装置所缓存的计算设备资源信息中,获取满足资源需求规格的空闲设备资源所对应的空闲设备资源量,其中,所述训练任务请求包括所述资源需求规格和设备资源需求量,所述网络模型为人工智能中用于执行预测任务的模型;
当所述空闲设备资源量不低于所述设备资源需求量时,基于所述设备资源需求量,从所述空闲设备资源中,选择出与自定义资源策略适配的适配设备资源,其中,所述自定义资源策略为定制的设备资源的选择条件;
当所述适配设备资源对应的适配设备资源量低于所述设备资源需求量时,获取所述设备资源需求量与所述适配设备资源量之间的差量;
从剩余设备资源中,选择出所述差量的设备资源,其中,所述剩余设备资源为所述空闲设备资源中除所述适配设备资源外的设备资源;
获取包括所述适配设备资源和所述差量的设备资源的目标设备资源;
生成所述目标设备资源的资源更新信息;
基于所述资源更新信息更新非易失性存储装置中所述目标设备资源的使用状态,以生成资源更新事件;
响应于所述资源更新事件,更新所述缓存装置所缓存的所述计算设备资源信息,以基于更新后的计算设备资源信息确定执行新的训练任务的计算设备资源;
基于所述目标设备资源,针对所述网络模型执行所述训练任务请求所请求执行的训练任务。
2.根据权利要求1所述的方法,其特征在于,所述响应于网络模型的训练任务请求之前,所述方法还包括:
响应于资源策略注册请求,获取自定义资源策略,生成包括所述自定义资源策略的所述训练任务请求,其中,所述自定义资源策略包括镜像优先策略、机房亲和性优先策略、网络通信优先策略和基础信息优先策略中的至少一种,所述镜像优先策略为包括需求镜像的设备资源具有最高优先级的策略,所述机房亲和性优先策略为同机房的设备资源具有最高优先级的策略,所述网络通信优先策略为具有网络通信功能的设备资源具有最高优先级的策略,所述基础信息优先策略为具有基础信息的设备资源具有最高优先级的策略;
所述基于所述设备资源需求量,从所述空闲设备资源中,选择出与自定义资源策略适配的适配设备资源之后,所述方法还包括:
当所述适配设备资源对应的适配设备资源量等于所述设备资源需求量时,获得包括所述适配设备资源的所述目标设备资源。
3.根据权利要求1所述的方法,其特征在于,所述从剩余设备资源中,选择出所述差量的设备资源之后,所述方法还包括:
针对所述差量的设备资源,显示资源待确认信息,其中,所述资源待确认信息为所述差量的设备资源是不满足所述自定义资源策略的设备资源的信息;
所述获取包括所述适配设备资源和所述差量的设备资源的所述目标设备资源,包括:
响应于针对所述资源待确认信息的确认操作,获取包括所述适配设备资源和所述差量的设备资源的所述目标设备资源。
4.根据权利要求2或3所述的方法,其特征在于,获取自定义资源策略之后,所述方法还包括:
将所述自定义资源策略存储至非易失性存储装置中;
响应于新的资源策略注册请求,复用所述自定义资源策略,生成包括所述自定义资源策略的新的训练任务请求。
5.根据权利要求1所述的方法,其特征在于,当所述自定义资源策略包括镜像优先策略时;
所述基于所述设备资源需求量,从所述空闲设备资源中,选择出与所述自定义资源策略适配的适配设备资源,包括:
从所述镜像优先策略中获取镜像标识;
基于所述设备资源需求量,从所述空闲设备资源中,选择出包括所述镜像标识对应的目标镜像的设备资源,作为所述适配设备资源。
6.根据权利要求1至3任一项所述的方法,其特征在于,所述从缓存装置所缓存的计算设备资源信息中,获取满足资源需求规格的空闲设备资源所对应的空闲设备资源量之后,所述方法还包括:
当所述空闲设备资源量低于所述设备资源需求量时,结束资源调度流程,并显示资源不足提示信息。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于腾讯科技(深圳)有限公司,未经腾讯科技(深圳)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202011410728.3/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种灯具及其生产工艺
- 下一篇:一种多功能建筑测绘仪存放箱