[发明专利]数据合并方法、装置、电子设备及存储介质在审
申请号: | 201910936874.0 | 申请日: | 2019-09-29 |
公开(公告)号: | CN110674086A | 公开(公告)日: | 2020-01-10 |
发明(设计)人: | 朱阅岸;林正显 | 申请(专利权)人: | 广州华多网络科技有限公司 |
主分类号: | G06F16/13 | 分类号: | G06F16/13;G06F16/22 |
代理公司: | 44351 深圳市智圈知识产权代理事务所(普通合伙) | 代理人: | 苗燕 |
地址: | 511400 广东省广州市番禺区南村镇万*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 数据块 访问频率 多个目标 存储介质 电子设备 符合条件 降低系统 数据合并 数据文件 提升系统 资源消耗 合并 申请 | ||
本申请实施例提供了一种数据合并方法、装置、电子设备及存储介质。该方法包括:获取数据文件包含的多个数据块,并分别获取多个数据块中的每个数据块的访问频率;基于每个数据块的访问频率从该多个数据块中确定多个目标数据块,将该多个目标数据块进行合并。本申请通过每个数据块的访问频率选取符合条件的数据块进行合并,从而降低系统的资源消耗,提升系统性能。
技术领域
本申请涉及数据库技术领域,更具体地,涉及一种数据合并方法、装置、电子设备及存储介质。
背景技术
近年来,写密集型应用程序越来越普遍。写密集型应用程序的特点是中央处理器消耗很少,任务的大部分时间在等待写操作完成,故写密集型应用程序的工作负载主要是写操作开销,如何有效地处理这种工作负载是数据库系统领域深入研究方向之一。为了处理这种工作负载,日志即数据的架构应运而生。然而,通过日志即数据的架构虽能够减少写操作开销,但随着而来的一个问题是读操作变得困难。
发明内容
本申请实施例提出了一种数据合并方法、装置、电子设备及存储介质,以解决合并操作资源消耗大的问题。
第一方面,本申请实施例提供了一种数据合并方法,该方法包括:获取数据文件包含的多个数据块,并分别获取多个数据块中的每个数据块的访问频率;基于每个数据块的访问频率从多个数据块中确定多个目标数据块;将多个目标数据块进行合并。
第二方面,本申请实施例提供了一种数据合并装置,该装置包括:频率获取模块,用于获取数据文件包含的多个数据块,并分别获取多个数据块中的每个数据块的访问频率;数据块确定模块,用于基于每个数据块的访问频率从多个数据块中确定多个目标数据块;数据块合并模块,用于将多个目标数据块进行合并。
第三方面,本申请实施例提供了一种电子设备,包括:存储器;一个或多个处理器,与存储器耦接;一个或多个程序,其中,一个或多个程序被存储在存储器中并被配置为由一个或多个处理器执行,一个或多个程序配置用于执行上述方法。
第四方面,本申请实施例提供了一种计算机可读取存储介质,该计算机可读取存储介质中存储有程序代码,该程序代码可被处理器调用执行如上述第一方面所述的方法。
本申请实施例提供了一种数据合并方法、装置、电子设备及存储介质。获取数据文件包含的多个数据块,并分别获取多个数据块中的每个数据块的访问频率;基于每个数据块的访问频率从该多个数据块中确定多个目标数据块,将该多个目标数据块进行合并。通过每个数据块的访问频率选取符合条件的数据块进行合并,从而降低系统的资源消耗,提升系统性能。
附图说明
为了更清楚地说明本申请实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1示出了一种适用于本申请实施例的应用环境示意图;
图2示出了本申请实施例提供的一数据合并方法的流程示意图;
图3示出了本申请实施例提供的一数据合并的示意图;
图4示出了本申请实施例提供的另一数据合并方法的流程示意图;
图5示出了本申请实施例提供的另一数据合并的示意图;
图6示出了本申请的图4所示的实施例提供的数据合并的方法的步骤S230的流程示意图;
图7示出了本申请实施例提供的又一数据合并的示意图;
图8示出了本申请实施例提供的再一数据合并的示意图;
图9示出了本申请实施例提供的又一数据合并方法的流程示意图;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于广州华多网络科技有限公司,未经广州华多网络科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910936874.0/2.html,转载请声明来源钻瓜专利网。