[发明专利]日志结构合并森林中的交错合并在审
申请号: | 201980038341.9 | 申请日: | 2019-09-11 |
公开(公告)号: | CN112236759A | 公开(公告)日: | 2021-01-15 |
发明(设计)人: | 格茨·格雷斐 | 申请(专利权)人: | 谷歌有限责任公司 |
主分类号: | G06F16/22 | 分类号: | G06F16/22 |
代理公司: | 中原信达知识产权代理有限责任公司 11219 | 代理人: | 李宝泉;任庆威 |
地址: | 美国加利*** | 国省代码: | 暂无信息 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 日志 结构 合并 森林 中的 交错 | ||
1.一种维护键值存储的方法,包括:
由具有一个或多个处理器的数据处理系统在第一缓冲器上建立用于对第一多个记录进行排序的第一游程,所述第一多个记录由第一对应的多个索引值最初索引,所述第一多个记录中的每个记录具有键域中的第一键值,所述键域定义多个键值;
由所述数据处理系统使用合并索引来跟踪所述第一游程的所述第一多个记录到数据库上维护的合并级别上的合并,所述合并索引引用在所述合并期间添加到所述合并级别的所述第一多个记录中的记录的所述第一键值;
由所述数据处理系统与所述第一多个记录的合并并发地在第二缓冲器上建立用于对第二多个记录进行排序的第二游程,所述第二多个记录由与所述第一多个索引值不同的第二对应的多个索引值来索引,所述第二多个记录中的每个记录具有所述键域中的第二键值;
由所述数据处理系统确定跟踪所述第一多个记录到所述合并级别上的合并的合并索引满足分位点条件,所述分位点条件对应于所述键域中的所述多个键值中的至少一个;
由所述数据处理系统响应于确定所述合并索引对应于所述分位点条件而从所述第二缓冲器中标识所述第二游程的所述第二多个记录的子集,所述子集的每个记录具有满足所述分位点条件的对应的第二键值;以及
由所述数据处理系统将所述第二游程的所述第二多个记录的所述子集添加到所述第一游程的所述第一多个记录到所述数据库上维护的所述合并级别上的合并。
2.根据权利要求1所述的方法,进一步包括:
由所述数据处理系统基于所述合并索引和由所述分位点条件指定的分位点索引的比值来确定转接键值;和
由所述数据处理系统基于所述数据库的合并带宽确定带宽偏移,所述合并带宽指示所述数据库正在添加所述第一多个记录并且所述第二多个记录的所述子集被合并的速率,并且
其中,确定所述合并索引满足所述分位点条件进一步包括确定所述合并索引满足由所述带宽偏移调整的所述转接键值。
3.根据任意前述权利要求所述的方法,进一步包括:
由所述数据处理系统使用游程索引来跟踪使用所述第二多个记录的所述第二游程的建立,所述游程索引引用在所述第二游程中排序的所述第二多个记录的数目;和
由所述数据处理系统确定由所述游程索引引用的所述第二多个记录中的记录的所述第二键值满足所述分位点条件,并且
其中,添加所述第二多个记录的所述子集进一步包括与所述第二游程的建立并发地并响应于确定由所述游程索引引用的记录的第二键值满足所述分位点条件而发起将所述第二游程的所述第二多个记录的所述子集添加到所述合并。
4.根据任意前述权利要求所述的方法,进一步包括:
由所述数据处理系统标识在所述第一缓冲器上建立所述第一游程的第一游程生成速率,所述第一游程生成速率指示在所述第一游程中对所述第一多个记录中的记录进行排序的速度;
由所述数据处理系统标识在所述第二缓冲器上建立所述第二游程的第二游程生成速率,所述第二游程生成速率指示在所述第二游程中对所述第二多个记录中的记录进行排序的速度;以及
由所述数据处理系统基于所述第一游程生成速率和所述第二游程生成速率中的至少一个来设定用于将所述第一游程的所述第一多个记录添加到所述数据库上的合并带宽。
5.根据任意前述权利要求所述的方法,进一步包括:
由所述数据处理系统针对所述第一多个记录标识对应的多个第一键值在所述键域上的分布;
由所述数据处理系统基于所述对应的多个第一键值在所述键域上的分布来确定包括所述分位点条件的多个分位点条件。
6.根据任意前述权利要求所述的方法,进一步包括:
由所述数据处理系统在所述合并级别上合并所述第二多个记录的所述子集和所述第一多个记录的同时,确定所述第一游程的所述第一多个记录的全部都被添加到所述数据库上的合并级别;
由所述数据处理系统响应于确定所述第一游程的所述第一多个记录的全部都被添加,从所述第一多个记录释放所述第一缓冲器以为第三游程接收第三多个记录;以及
由所述数据处理系统与将所述第二多个记录的所述子集合并到数据库上的所述合并级别上并发地在所述第二缓冲器上维护所述第二多个记录。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于谷歌有限责任公司,未经谷歌有限责任公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201980038341.9/1.html,转载请声明来源钻瓜专利网。