[发明专利]数据库数据分片存储方法和装置、数据查询方法和装置有效

专利信息
申请号: 201510428470.2 申请日: 2015-07-20
公开(公告)号: CN105045877B 公开(公告)日: 2018-10-12
发明(设计)人: 吴利斌;刘少东;黄茂彪 申请(专利权)人: 深信服科技股份有限公司
主分类号: G06F17/30 分类号: G06F17/30;G06F11/14
代理公司: 深圳市世纪恒程知识产权代理事务所 44287 代理人: 胡海国
地址: 518000 广东省深圳市南*** 国省代码: 广东;44
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 数据库 数据 分片 存储 方法 装置 查询
【说明书】:

发明涉及一种数据库数据分片存储方法,包括以下步骤:生成数据库主机中存储的各个数据表对应的多个子表,其中,每一数据表对应的所有子表的数据覆盖对应的数据表,且各子表之间的数据不重叠;将数据库主机中存储的各个数据表对应的多个子表存储到多个数据库备机上,使得数据库主机中存储的各个数据表中存在对应的子表被分配到多个数据库备机上的数据表;维护数据库主机中的各数据表的子表在数据库备机上的分布信息。上述方法对于读数据请求的响应速度。此外,还提供一种数据库数据分片存储装置,以及提供一种基于数据分片存储的数据库数据查询方法和装置。

技术领域

本发明涉及数据库技术领域,特别是涉及一种数据库数据分片存储方法和装置,以及涉及一种基于数据分片存储的数据库数据查询方法和装置。

背景技术

近年来,随着互联网技术的发展,互联网应用越来越普及。随着互联网应用所拥有的客户数量的增加,互联网应用积累的数据量也越来越巨大,而且由于产品之间竞争激烈,用户体验对于互联网应用至关重要,这些针对互联网应用对于数据查询的响应速度以及并发处理能力提出了更高的要求。

为了适应用户需求以及在互联网竞争中取得优势,互联网应用提供商致力于提高数据查询的响应速度以及并发处理能力。传统的方案中,一般采用加强数据库服务器的硬件配置的措施,以提高数据库处理服务器的处理性能,这种提升数据库处理服务器的处理性能的方式称为纵向扩展;还是一种方式,称为横向扩展,即是,增加数据库服务器的数量,将一个数据库服务器中的数据全量拷贝到其它的数据库服务器,多个数据库服务器共同提供数据读写服务。

上述的纵向扩展方式和横向扩展方式,虽然可以减轻单个数据库服务器的数据查询压力,提高对多个数据查询请求的并发处理能力,可以减少用户等待服务器处理其它用户的数据查询请求的时间,从而一定程度上可以提高数据查询的整体响应速度。但是,在数据查询请求较少的情况下,上述的纵向扩展方式和横向扩展方式对于用户的数据查询请求的响应速度的提高,几乎没有贡献。一个数据查询请求至少会涉及到一张表,对于一个数据查询请求,数据库服务器有可能需要在对应的数据表中遍历整张表,从而可能需要较长的遍历时间。

尤其是当一个数据表中的数据量巨大时,查询该整个数据表可能需要花费用户不希望等待的时间。

发明内容

基于此,有必要针对上述查询数据时有可能需要遍历整张数据表从而延长响应速度的问题,提供一种数据库数据分片存储方法和装置。

此外,还有必要针对上述查询数据时有可能需要遍历整张数据表从而延长响应速度的问题,提供一种基于数据分片存储的数据库数据查询方法和装置。

一种数据库数据分片存储方法,包括以下步骤:

生成数据库主机中存储的各个数据表对应的多个子表,其中,每一数据表对应的所有子表的数据覆盖对应的数据表,且各子表之间的数据不重叠;

将数据库主机中存储的各个数据表对应的多个子表存储到多个数据库备机上,使得数据库主机中存储的各个数据表中存在对应的子表被分配到多个数据库备机上的数据表;

维护数据库主机中的各数据表的子表在数据库备机上的分布信息。

在其中一个实施例中,所述数据库主机中存储完整的数据库。

在其中一个实施例中,数据表的子表在数据库备机上的分布信息包括存储了数据表对应的子表的数据库备机的标识,以及数据库备机上存储的数据表子表的主键值范围。

在其中一个实施例中,同一个子表被存储到多个不同的数据库备机上。

在其中一个实施例中,还包括每间隔预设时长在数据库备机上进行负载均衡处理的过程,所述在数据库备机上进行负载均衡处理的过程包括以下步骤:

获取数据库备机中数据存储量相对较小的数据库备机,

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于深信服科技股份有限公司,未经深信服科技股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/201510428470.2/2.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top