[发明专利]用于管理数据库的方法和系统有效
申请号: | 201410119830.6 | 申请日: | 2014-03-27 |
公开(公告)号: | CN104951462B | 公开(公告)日: | 2018-08-03 |
发明(设计)人: | 庄威;曲俊媚;李立;刘亮;尹文君 | 申请(专利权)人: | 国际商业机器公司 |
主分类号: | G06F17/30 | 分类号: | G06F17/30 |
代理公司: | 北京市金杜律师事务所 11256 | 代理人: | 王茂华 |
地址: | 美国纽*** | 国省代码: | 美国;US |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 用于 管理 数据库 方法 系统 | ||
1.一种用于管理数据库的方法,所述数据库中的每项数据与时间戳和数据点相关联,所述时间戳被用作所述数据库中的表的行的行键,所述行被定义在所述表的两个维度中的一个维度上,所述方法包括:
基于用户针对所述数据库的先前数据访问,获取所述用户的行为特征,其中所述行为特征指示所述先前数据访问的时间跨度;
基于获取的所述行为特征以及所述数据库的系统配置,将所述表中的列划分为列族,所述列被定义在所述表的所述两个维度中的另一维度上,所述系统配置指示与所述数据库相关联的文件系统中的块的大小;以及
使所述数据库中的数据至少部分地基于相关联的所述数据点而被存储于相应的列族。
2.根据权利要求1所述的方法,其中将所述表中的列划分为列族包括:
从所述表生成至少一个逻辑表,所述至少一个逻辑表的行数基于所述时间跨度来确定;以及
至少部分地基于所述至少一个逻辑表的所述行数和所述块的所述大小来确定每个所述列族中包含的列数,使得所述列族中的数据占用的所述块的数目最小。
3.根据权利要求2所述的方法,其中所述行为特征还指示所述先前数据访问的数据类型,并且其中每个所述列族中包含的所述列数还基于所述数据类型来确定。
4.根据权利要求2所述的方法,其中所述数据库的所述表中的数据被划分到多个区域中存储,所述方法还包括:
基于所述区域的大小和所述块的大小,来确定所述至少一个逻辑表中包含的所述列族的数目,使得所述至少一个逻辑表中的数据占用的所述区域的数目最小。
5.根据权利要求2所述的方法,还包括:
维护用于所述数据库中的所述表的索引,所述索引将所述数据点的标识映射至所述至少一个逻辑表和所述列族。
6.根据权利要求1至5任一项所述的方法,其中使所述数据库中的数据至少部分地基于相关联的所述数据点而被存储于相应的列族包括:
使相关的所述数据点的数据被存储在相同的列族中。
7.根据权利要求1至5任一项所述的方法,其中所述数据库是Hadoop数据库HBase。
8.一种用于管理数据库的系统,所述数据库中的每项数据与时间戳和数据点相关联,所述时间戳被用作所述数据库中的表的行的行键,所述行被定义在所述表的两个维度中的一个维度上,所述系统包括:
行为特征获取单元,被配置为基于用户针对所述数据库的先前数据访问,获取所述用户的行为特征,其中所述行为特征指示所述先前数据访问的时间跨度;
列族划分单元,被配置为基于获取的所述行为特征以及所述数据库的系统配置,将所述表中的列划分为列族,所述列被定义在所述表的所述两个维度中的另一维度上,所述系统配置指示与所述数据库相关联的文件系统中的块的大小;以及
数据存储管理单元,被配置为使所述数据库中的数据至少部分地基于相关联的所述数据点而被存储于相应的列族。
9.根据权利要求8所述的系统,其中所述列族划分单元包括:
逻辑表生成单元,被配置为从所述表生成至少一个逻辑表,所述至少一个逻辑表的行数基于所述时间跨度来确定;以及
列数确定单元,被配置为至少部分地基于所述至少一个逻辑表的所述行数和所述块的所述大小来确定每个所述列族中包含的列数,使得所述列族中的数据占用的所述块的数目最小。
10.根据权利要求9所述的系统,其中所述行为特征还指示所述先前数据访问的数据类型,
并且其中每个所述列族中包含的所述列数还基于所述数据类型来确定。
11.根据权利要求9所述的系统,其中所述数据库的所述表中的数据被划分到多个区域中存储,所述系统还包括:
列族数目确定单元,被配置为基于所述区域的大小和所述块的大小,来确定所述至少一个逻辑表中包含的所述列族的数目,使得所述至少一个逻辑表中的数据占用的所述区域的数目最小。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于国际商业机器公司,未经国际商业机器公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201410119830.6/1.html,转载请声明来源钻瓜专利网。