[发明专利]一种基于HBase高扩展性数据库设计方法在审
申请号: | 201510211389.9 | 申请日: | 2015-04-30 |
公开(公告)号: | CN104809211A | 公开(公告)日: | 2015-07-29 |
发明(设计)人: | 杨峰;周学海;庄航;卢坤;李昌龙;孙明明 | 申请(专利权)人: | 苏州星熙数据科技有限公司 |
主分类号: | G06F17/30 | 分类号: | G06F17/30 |
代理公司: | 暂无信息 | 代理人: | 暂无信息 |
地址: | 215123 江苏省苏*** | 国省代码: | 江苏;32 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 基于 hbase 扩展性 数据库 设计 方法 | ||
1.一种基于HBase高扩展性数据库设计方法,其特征在于在HBase中存在热点数据时,首先为热点数据制作多份替身,并将替身转移与原始数据存储位置不同的多个不同存储节点上,并主动平衡多个替身数据之间的读取请求;在原始数据发生更改时,主动同步各个替身数据。
2.根据权利要求1所述的一种基于HBase高扩展性数据库设计方法,其特征在于所述的热点数据处理包括以下步骤:
(a)探测HBase中热点数据,在一段时间内,某些特定的数据访问频度高,不会经常被修改,且能预测到接下来一段时间该数据的热度不会下降,这些数据将会被认定为热点数据;
(b)当热点数据选定之后,选择该数据所在节点之外的多个节点作为替身数据存储节点,将该数据同步到上述选定节点,并写入META表中以备查找数据时使用;
(c)当HBase收到查找该热点数据的命令时,从META表中可找到该热点数据原始位置和多个替身数据所在位置,将查找命令随机分配给替身数据所在节点;
(d)如果HBase收到对该热点数据的更新操作时,首先找到数据的原始位置,并在原始位置上的数据执行更新操作;在原始位置上的数据完成更新操作后,将该位置的数据同步其所有的替身数据。
3.根据权利要求2所述的热点数据处理,其特征在于所述步骤(b)和步骤(c)中数据的读操作包括以下步骤:
(1)首先尝试获取需要的锁;
(2)选取热点数据所在的存储节点之外的多个存储节点;
(3)将数据从原始节点同步到步骤(2)中选取的存储节点中;
(4)向META表中更新数据存在的位置信息;
(5)随后查找过程中,根据META表中信息找到替身数据位置;
(6)通过allocate方法把查找请求分配到相应的替身数据所在的位置。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于苏州星熙数据科技有限公司,未经苏州星熙数据科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201510211389.9/1.html,转载请声明来源钻瓜专利网。
- 上一篇:去除溶液污染物装置
- 下一篇:BioDopp生化处理工艺的进水及泥水混合装置