[发明专利]资源优化方法、装置、设备及介质有效
申请号: | 201711491113.6 | 申请日: | 2017-12-30 |
公开(公告)号: | CN110019313B | 公开(公告)日: | 2021-09-28 |
发明(设计)人: | 杨名;杨孝平 | 申请(专利权)人: | 中国移动通信集团四川有限公司;中国移动通信集团公司 |
主分类号: | G06F16/242 | 分类号: | G06F16/242;G06F16/2453;G06F9/50 |
代理公司: | 北京东方亿思知识产权代理有限责任公司 11258 | 代理人: | 彭琼 |
地址: | 610041 四*** | 国省代码: | 四川;51 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 资源 优化 方法 装置 设备 介质 | ||
本发明实施例提供了一种资源优化方法、装置、设备及介质。获取预定采样时间内多个采样时刻的结构化查询语言SQL运行数据;基于SQL运行数据计算每个SQL在预定采样时间内运行的IO合理开销值;以及基于IO合理开销值对业务运行期间每个SQL的IO资源进行调整。由此,可以针对每个SQL而设定合适的IO值,提高了IO资源利用率,达到资源合理分配。
技术领域
本发明涉及数据库技术领域,尤其涉及一种资源优化方法、装置、设备及介质。
背景技术
在当今大数据的技术背景下,有各种分布式的数据库或者非数据库系统,如Greenplum、oracle Exadata一体机、DB2DBF、hadoop集群等。这些分布式大数据集群都或多或少的可以在数据库层面控制系统资源的使用,如控制CPU的使用,控制SQL(结构化查询语言)的并发运行,控制内存的最大使用率等,但是针对IO(输入输出)资源做限制的技术较少见。
大数据环境下的MPP数据库最重要的性能参数就是IO,但是现有情况下,如果没有对IO的控制,可能低优先级的SQL也会占用大量的IO资源,导致高优先级的SQL无法得到最大资源的运行。
目前针对控制IO资源开销,采用的技术手段通常使用数据库配置参数,固定控制指标,减少对IO的冲击。但该方式对较大IO或者较少的SQL开销时造成相应的SQL等待和资源浪费。
综上所述,需要一种能够对SQL并行化运行中IO资源消耗进行优化的方案。
发明内容
本发明实施例提供了一种能够对SQL并行化运行中IO资源消耗进行优化的资源优化方法、装置、设备及介质。
第一方面,本发明实施例提供了一种资源优化方法,方法包括:获取预定采样时间内多个采样时刻的结构化查询语言SQL运行数据;基于所述SQL运行数据计算每个所述SQL在所述预定采样时间内运行的IO合理开销值;以及基于所述IO合理开销值对业务运行期间每个所述SQL的IO资源进行调整。
第二方面,本发明实施例提供了一种资源优化装置,装置包括:采集模块,用于获取预定采样时间内多个采样时刻的结构化查询语言SQL运行数据;计算模块,用于基于SQL运行数据计算每个SQL在预定采样时间内运行的IO合理开销值;以及调整模块,用于基于IO合理开销值对业务运行期间每个SQL的IO资源进行调整。
本发明实施例提供了一种计算设备,包括:至少一个处理器、至少一个存储器以及存储在存储器中的计算机程序指令,当计算机程序指令被处理器执行时实现如上述实施方式中第一方面的方法。
第四方面,本发明实施例提供了一种计算机可读存储介质,其上存储有计算机程序指令,当计算机程序指令被处理器执行时实现如上述实施方式中第一方面的方法。
本发明实施例提供的资源优化方法、装置、设备及介质,通过采集运行中各个SQL对IO的开销情况,可以针对每个SQL设定合适的IO值,提高IO资源利用率,使得IO资源的分配更加合理。
附图说明
为了更清楚地说明本发明实施例的技术方案,下面将对本发明实施例中所需要使用的附图作简单地介绍,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1示出了根据本发明一实施例的资源优化方法的示意性流程图。
图2示出了本发明另一实施例的资源优化方法的示意性流程图。
图3示出了根据本发明一实施例的资源优化装置的结构的示意性框图。
图4示出了本发明实施例提供的计算设备的硬件结构示意图。
具体实施方式
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中国移动通信集团四川有限公司;中国移动通信集团公司,未经中国移动通信集团四川有限公司;中国移动通信集团公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201711491113.6/2.html,转载请声明来源钻瓜专利网。