[发明专利]一种任务处理方法、装置、设备和介质在审
申请号: | 201910631261.6 | 申请日: | 2019-07-12 |
公开(公告)号: | CN110377409A | 公开(公告)日: | 2019-10-25 |
发明(设计)人: | 张明威;李欢;刘维 | 申请(专利权)人: | 北京百度网讯科技有限公司 |
主分类号: | G06F9/48 | 分类号: | G06F9/48;G06F9/54 |
代理公司: | 北京品源专利代理有限公司 11332 | 代理人: | 孟金喆 |
地址: | 100085 北京市*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 目标容器 任务处理 任务资源 编排 集群资源 模块发送 容器分配 信息确定 最大化 反馈 | ||
1.一种任务处理方法,其特征在于,包括:
根据用户任务需要的任务资源信息,向容器编排模块发送容器分配请求,以指示所述容器编排模块根据所述任务资源信息确定至少一个目标容器;
根据所述容器编排模块反馈的至少一个目标容器的标识,控制所述至少一个目标容器执行用户任务。
2.根据权利要求1所述的方法,其特征在于,根据所述容器编排模块反馈的至少一个目标容器的标识,控制所述至少一个目标容器执行用户任务之前,还包括:
根据所述容器编排模块反馈的至少一个目标容器的标识,向所述至少一个目标容器发送环境配置指令,以指示所述至少一个目标容器配置用户任务所需的运行环境。
3.根据权利要求2所述的方法,其特征在于,向所述至少一个目标容器发送环境配置指令之后,还包括:
向所述至少一个目标容器发送环境校验指令,以指示所述至少一个目标容器确定运行环境是否满足运行要求;
若任一目标容器的运行环境不满足运行要求,则向容器编排模块发送容器替换请求,以指示所述容器编排模块反馈新目标容器,其中所述新目标容器用于替换该目标容器;
对新目标容器进行环境配置和环境校验。
4.根据权利要求3所述的方法,其特征在于,所述方法还包括:
若向容器编排模块发送容器替换请求的次数大于次数阈值,且所述容器编排模块反馈的新目标容器的运行环境不满足运行要求,则拒绝用户任务。
5.根据权利要求1所述的方法,其特征在于,控制所述至少一个目标容器执行用户任务过程中,还包括:
若监测到用于执行所述用户任务的至少一个目标容器被所述容器编排模块回收,则停止执行所述用户任务,并等待所述容器编排模块重新分配目标容器。
6.根据权利要求1所述的方法,其特征在于,若所述容器编排模块反馈的是至少两个目标容器的标识,则控制所述至少两个目标容器执行用户任务之前,还包括:
从所述至少两个目标容器中选择主计算容器,并将其余目标容器作为从计算容器;
相应地,控制所述至少两个目标容器执行用户任务,包括:
向所述主计算容器发送所述用户任务,以使所述主计算容器启动作业主进程执行所述用户任务过程中产生所述从计算容器的执行命令并反馈;
向所述从计算容器发送执行命令,以使所述主计算容器与所述从计算容器并行执行所述用户任务。
7.根据权利要求1所述的方法,其特征在于,控制所述至少一个目标容器执行用户任务之后,还包括:
若检测到所述用户任务完成,则向所述至少一个目标容器发送后处理命令,以使所述至少一个目标容器上传用户任务的作业日志和处理结果。
8.一种任务处理方法,其特征在于,包括:
接收作业管理模块根据用户任务需要的任务资源信息发送的容器分配请求;
根据所述任务资源信息确定至少一个目标容器,并向所述作业管理模块反馈所述至少一个目标容器的标识,以使所述作业管理模块依据所述至少一个目标容器的标识,控制所述至少一个目标容器执行用户任务。
9.根据权利要求8所述的方法,其特征在于,向所述作业管理模块反馈所述至少一个目标容器的标识之后,还包括:
接收所述作业管理模块发送的容器替换请求,其中所述容器替换请求是所述作业管理模块在确定任一目标容器的运行环境不满足运行要求时所发送的;
向所述作业管理模块反馈用于替换该目标容器的新目标容器的标识。
10.根据权利要求8所述的方法,其特征在于,向所述作业管理模块反馈所述至少一个目标容器的标识之后,还包括:
若所述用户任务的优先级低于集群队列中其他用户任务的优先级,且监测到集群计算资源不满足集群作业要求,则回收分配给所述用户任务的至少一个目标容器。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京百度网讯科技有限公司,未经北京百度网讯科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910631261.6/1.html,转载请声明来源钻瓜专利网。