[发明专利]作业运行资源分配方法及装置在审
申请号: | 202010857955.4 | 申请日: | 2020-08-24 |
公开(公告)号: | CN112000478A | 公开(公告)日: | 2020-11-27 |
发明(设计)人: | 徐雅光;韩路;严琳 | 申请(专利权)人: | 中国银行股份有限公司 |
主分类号: | G06F9/50 | 分类号: | G06F9/50;G06F16/242;G06F16/2455 |
代理公司: | 北京三友知识产权代理有限公司 11127 | 代理人: | 谷敬丽;周晓飞 |
地址: | 100818 *** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 作业 运行 资源 分配 方法 装置 | ||
1.一种作业运行资源分配方法,其特征在于,包括:
接收待运行作业的资源分配指令;
根据所述资源分配指令,获得所述待运行作业的历史运行信息,所述历史运行信息包括:历史运行逻辑信息,历史运行时长信息,历史运行资源信息和历史运行数据量信息;
根据所述历史运行信息,确定所述待运行作业的资源预测信息;
根据所述预测资源信息,进行作业运行资源分配。
2.如权利要求1所述的作业运行资源分配方法,其特征在于,按如下方式获得所述待运行作业的历史运行逻辑信息:
获得所述待运行作业的历史SQL语句;
对所述历史SQL语句进行元数据化处理,得到所述历史SQL语句对应的结构化数据;
根据所述历史SQL语句对应的结构化数据,获得历史运行逻辑信息。
3.如权利要求1或2任一项所述的作业运行资源分配方法,其特征在于,所述历史运行逻辑信息包括:关联条件字段数量信息,关联表数量信息,分组条件数量信息,分组字段数量信息,字段转化函数数量信息,选择字段数量信息,聚合字段数量信息,子查询数量信息,过滤条件字段数量信息,作业步骤数量信息其中之一或任意组合。
4.如权利要求1所述的作业运行资源分配方法,其特征在于,所述资源预测信息包括:CPU资源预测信息,内存资源预测信息,分布运算节点数量信息和关联参数信息。
5.如权利要求1所述的作业运行资源分配方法,其特征在于,还包括:确定所述待运行作业的资源预测信息之后,根据所述资源预测信息生成运行资源参数类型表,运行资源参数信息表和作业关系信息表;
根据所述预测资源信息,进行作业运行资源分配,包括:根据所述运行资源参数类型表,运行资源参数信息表和作业关系信息表,进行作业运行资源分配。
6.一种作业运行资源分配装置,其特征在于,包括:
指令接收模块,用于接收待运行作业的资源分配指令;
信息获得模块,用于根据所述资源分配指令,获得所述待运行作业的历史运行信息,所述历史运行信息包括:历史运行逻辑信息,历史运行时长信息,历史运行资源信息和历史运行数据量信息;
信息确定模块,用于根据所述历史运行信息,确定所述待运行作业的资源预测信息;
资源分配模块,用于根据所述预测资源信息,进行作业运行资源分配。
7.如权利要求6所述的作业运行资源分配装置,其特征在于,所述信息获得模块进一步用于,按如下方式获得所述待运行作业的历史运行逻辑信息:
获得所述待运行作业的历史SQL语句;
对所述历史SQL语句进行元数据化处理,得到所述历史SQL语句对应的结构化数据;
根据所述历史SQL语句对应的结构化数据,获得历史运行逻辑信息。
8.如权利要求6或7任一项所述的作业运行资源分配装置,其特征在于,所述历史运行逻辑信息包括:关联条件字段数量信息,关联表数量信息,分组条件数量信息,分组字段数量信息,字段转化函数数量信息,选择字段数量信息,聚合字段数量信息,子查询数量信息,过滤条件字段数量信息,作业步骤数量信息其中之一或任意组合。
9.如权利要求6所述的作业运行资源分配装置,其特征在于,所述资源预测信息包括:CPU资源预测信息,内存资源预测信息,分布运算节点数量信息和关联参数信息。
10.如权利要求6所述的作业运行资源分配装置,其特征在于,还包括:
表生成模块,用于确定所述待运行作业的资源预测信息之后,根据所述资源预测信息生成运行资源参数类型表,运行资源参数信息表和作业关系信息表;
所述资源分配模块进一步用于:根据所述运行资源参数类型表,运行资源参数信息表和作业关系信息表,进行作业运行资源分配。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中国银行股份有限公司,未经中国银行股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010857955.4/1.html,转载请声明来源钻瓜专利网。