[发明专利]资源伸缩方法、装置、计算机设备及存储介质有效
申请号: | 201810834678.8 | 申请日: | 2018-07-26 |
公开(公告)号: | CN109086135B | 公开(公告)日: | 2021-10-26 |
发明(设计)人: | 孟洋 | 申请(专利权)人: | 北京百度网讯科技有限公司 |
主分类号: | G06F9/50 | 分类号: | G06F9/50;G06N3/063 |
代理公司: | 北京鸿德海业知识产权代理有限公司 11412 | 代理人: | 袁媛 |
地址: | 100085 北京市*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明公开了资源伸缩方法、装置、计算机设备及存储介质,其中方法可包括:获取用户为所提交的作业配置的不同进程的实例副本数以及单个实例副本所需资源,进程包括:master进程、parameter server进程以及trainer进程,trainer进程包括最大实例副本数和最小实例副本数,所述作业为离线作业,离线作业与在线任务混合部署在系统中;当按照所配置的实例副本数以及单个实例副本所需资源依次启动master进程和parameter server进程后,尝试按照最小实例副本数以及单个实例副本所需资源启动trainer进程;当每次满足触发条件时,从所提交的作业中选出符合调整条件的可调整作业,根据当前的系统资源使用情况对可调整作业中的trainer实例副本进行扩容或缩容处理。应用本发明所述方案,能够提升资源利用率等。 | ||
搜索关键词: | 资源 伸缩 方法 装置 计算机 设备 存储 介质 | ||
【主权项】:
1.一种资源伸缩方法,其特征在于,包括:获取用户为所提交的作业配置的不同进程的实例副本数以及单个实例副本所需资源,所述进程包括:master进程、parameter server进程以及trainer进程,其中,所述trainer进程包括最大实例副本数和最小实例副本数,所述作业为离线作业,所述离线作业与在线任务混合部署在系统中;当按照所配置的实例副本数以及单个实例副本所需资源依次启动所述master进程以及所述parameter server进程后,尝试按照所述最小实例副本数以及单个实例副本所需资源启动所述trainer进程;当每次满足触发条件时,从所提交的作业中选出符合调整条件的可调整作业,并根据当前的系统资源使用情况对所述可调整作业中的trainer实例副本进行扩容或缩容处理。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京百度网讯科技有限公司,未经北京百度网讯科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201810834678.8/,转载请声明来源钻瓜专利网。