[发明专利]基于分片关系型数据库的查询方法和系统有效
申请号: | 201610771058.5 | 申请日: | 2016-08-30 |
公开(公告)号: | CN106250565B | 公开(公告)日: | 2019-05-07 |
发明(设计)人: | 刘德建;邱宗铭;陈霖;吴拥民;陈宏展 | 申请(专利权)人: | 福建天晴数码有限公司 |
主分类号: | G06F16/245 | 分类号: | G06F16/245;G06F16/28 |
代理公司: | 福州市景弘专利代理事务所(普通合伙) 35219 | 代理人: | 林祥翔;吕元辉 |
地址: | 350000 福建省福*** | 国省代码: | 福建;35 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明提供一种基于分片关系型数据库的查询方法和系统解决现有技术中将大量数据读取到中心节点的内存中,中间节点顺序执行性能非常差,在数据量大的时候,无法满足在线查询的需求的问题。该方法包括步骤:接收语义如下的查询语句:SELECT列名称A,COUNT(DISTINCT列名称B)FROM表名称T GROUP BY列名称G;列名称G是列名称A的子集;其能避免中心节点内存消耗甚至内存溢出。 | ||
搜索关键词: | 基于 分片 关系 数据库 查询 方法 系统 | ||
【主权项】:
1.基于分片关系型数据库的查询方法,其特征在于,包括步骤:S101、接收语义如下的查询语句:SELECT列名称A,COUNT(DISTINCT列名称B)FROM表名称TGROUPBY列名称G;列名称G是列名称A的子集;S102、在各分片节点分别执行SELECT列名称CFROM表名称T,列名称C是列名称A与列名称B的并集;将上述各分片节点的查询结果中的每条记录进行处理,处理即根据每条记录的b值取其hash值,hash值相同的记录放入相同的数据管道,b值为记录中列名称B所对应的值;S103、对在相同数据管道的记录,分别根据G列的值进行分组,在各分组内计算该分组内不同b值出现的个数count,每个分组计算结果对应一条对应关系(G,COUNT);S104、将各管道中上述分组计算获得的对应关系(G,COUNT)合并,即根据列名称G,合并g值相同的记录,合并后的记录的COUNT列的值为合并的所有对应关系的COUNT列的值相加;合并的结果即为查询结果。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于福建天晴数码有限公司,未经福建天晴数码有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201610771058.5/,转载请声明来源钻瓜专利网。