[发明专利]云平台系统、管理方法、设备及存储介质有效
申请号: | 201910099914.0 | 申请日: | 2019-01-31 |
公开(公告)号: | CN109800060B | 公开(公告)日: | 2021-07-27 |
发明(设计)人: | 邵宇 | 申请(专利权)人: | 携程旅游信息技术(上海)有限公司 |
主分类号: | G06F9/455 | 分类号: | G06F9/455;G06F9/50 |
代理公司: | 上海隆天律师事务所 31282 | 代理人: | 臧云霄;钟宗 |
地址: | 201203 上海市浦东新*** | 国省代码: | 上海;31 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 平台 系统 管理 方法 设备 存储 介质 | ||
1.一种云平台系统,其特征在于,用于采用节点管理器执行数据处理作业,所述节点管理器包括第一节点管理器和第二节点管理器;
所述系统包括至少一个第一子平台和至少一个第二子平台,其中:
所述第一子平台包括资源管理器和多个所述第一节点管理器;
所述第二子平台包括容器模块和多个所述第二节点管理器,所述容器模块用于创建容器并加载所述第一节点管理器的镜像文件,以配置形成所述第二节点管理器;
所述资源管理器用于接收数据处理作业请求,所述数据处理作业请求包括作业的需求资源量;
所述资源管理器用于根据所述需求资源量将所述数据处理作业调度至各个所述节点管理器;
每个所述第二子平台还包括检测模块、判断模块和配置模块;
所述检测模块用于检测第二子平台的内存的可用资源量;
所述判断模块用于判断检测到的所述可用资源量是否大于设定的第一阈值;
所述配置模块用于根据所述判断模块的判断结果决定是否回收分配给所述第二节点管理器的资源;
所述节点管理器用于执行接收到的所述数据处理作业;
创建的加载所述第一节点管理器的所述容器设定有限定资源量,所述限定资源量为第二阈值,各个所述节点管理器的容器的需求资源量与所述第二阈值的比值小于所述第二子平台的其他容器的需求资源量与限定资源量的比值;
所述检测模块还用于检测所述第二子平台的各个容器的内存的需求资源量与限定资源量的比值;
所述判断模块还用于选择具有最小的内存需求资源量与限定资源量比值的所述容器;
所述配置模块还用于回收选择的所述容器中的资源。
2.根据权利要求1所述的云平台系统,其特征在于,还包括驱动模块,所述驱动模块用于监控每个所述节点管理器执行所述数据处理作业的状态,如果其中一个所述节点管理器执行所述数据处理作业异常,则将执行异常的所述数据处理作业发送至所述资源管理器。
3.根据权利要求1所述的云平台系统,其特征在于,所述第二子平台用于I/O密集型服务的平台。
4.一种云平台管理方法,采用如权利要求1至3中任意一项所述云平台系统,其特征在于,所述云平台管理方法包括以下步骤:
所述资源管理器接收数据处理作业的请求,所述数据处理作业的请求包括作业的需求资源量;
所述资源管理器根据所述需求资源量将所述数据处理作业调度至各个所述节点管理器;
每个所述第二子平台还包括检测模块、判断模块和配置模块,所述云平台管理方法还包括以下步骤:
所述检测模块检测第二子平台的内存的可用资源量;
所述判断模块判断检测到的所述可用资源量是否大于设定的第一阈值;
若否,则所述配置模块回收分配给所述第二节点管理器的资源;
所述节点管理器执行接收到的所述数据处理作业;
所述云平台管理方法还包括在所述容器模块创建容器并加载所述第一节点管理器的镜像文件以配置形成所述第二节点管理器时,设定所述容器的限定资源量为第二阈值,各个所述节点管理器的容器的需求资源量与所述第二阈值的比值小于所述第二子平台的其他容器的需求资源量与限定资源量的比值;
所述配置模块回收分配给所述第二节点管理器的资源步骤包括:
所述检测模块检测所述第二子平台的各个容器的内存的需求资源量与限定资源量的比值;
所述判断模块选择具有最小的内存需求资源量与限定资源量比值的所述容器;
所述配置模块回收选择的所述容器中的资源。
5.根据权利要求4所述的云平台管理方法,其特征在于,所述云平台系统还包括驱动模块,所述云平台管理方法还包括以下步骤:
所述驱动模块监控每个所述节点管理器执行所述数据处理作业的状态,如果其中一个所述节点管理器执行所述数据处理作业异常,则将执行异常的所述数据处理作业发送至所述资源管理器。
6.一种云平台设备,其特征在于,包括:
处理器;
存储器,其中存储有所述处理器的可执行指令;
其中,所述处理器配置为经由执行所述可执行指令来执行权利要求4或5所述云平台管理方法的步骤。
7.一种计算机可读存储介质,用于存储程序,其特征在于,所述程序被执行时实现权利要求4或5所述云平台管理方法的步骤。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于携程旅游信息技术(上海)有限公司,未经携程旅游信息技术(上海)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910099914.0/1.html,转载请声明来源钻瓜专利网。