[发明专利]一种数据表的分区管理方法及装置有效
申请号: | 201580001180.8 | 申请日: | 2015-06-26 |
公开(公告)号: | CN106716400B | 公开(公告)日: | 2019-09-27 |
发明(设计)人: | 刘哲;沈柯;王铁英 | 申请(专利权)人: | 华为技术有限公司 |
主分类号: | G06F16/22 | 分类号: | G06F16/22;G06F16/27 |
代理公司: | 广州三环专利商标代理有限公司 44202 | 代理人: | 郝传鑫;熊永强 |
地址: | 518129 广东*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 数据表 分区 管理 方法 装置 | ||
1.一种数据表的分区管理方法,其特征在于,表组中包括一个事实表和至少一个维度表,所述事实表不是所述表组中任一数据表的维度表,每个所述维度表为所述事实表相关联的维度表,所述每个维度表与所述事实表相关联的字段作为所述事实表与所述每个维度表之间的关联键,所述方法包括:
确定所述表组中每个数据表的类型以及关联键,所述数据表的类型包括一维维度表、多维维度表或事实表;
根据所述表组中每个所述数据表的类型,针对每个所述数据表中的关联键对每个所述数据表的行副本空间进行一维分区以及列副本空间进行一维或多维分区。
2.如权利要求1所述的方法,其特征在于,所述根据所述表组中每个所述数据表的类型,针对每个所述数据表中的关联键对每个所述数据表的行副本空间进行一维分区以及列副本空间进行一维或多维分区包括:
当所述数据表为一维维度表时,针对所述一维维度表的单个关联键分别对所述一维维度表的列副本空间以及行副本空间进行一维分区得到所述一维维度表的一维列副本分区以及一维行副本分区。
3.如权利要求2所述的方法,其特征在于,所述根据所述表组中每个所述数据表的类型,针对每个所述数据表中的关联键对每个所述数据表的行副本空间进行一维分区以及列副本空间进行一维或多维分区包括:
当所述数据表为多维维度表时,获取所述多维维度表的多个关联键中的每个关联键分别对应的一维列副本分区以及一维行副本分区;
将所述多个关联键对应的多个一维列副本分区进行组合得到所述多维维度表的多维列副本分区,并从所述多个关联键中选择一个关联键对应的一维行副本分区作为所述多维维度表的一维行副本分区。
4.如权利要求2或3所述的方法,其特征在于,所述根据所述表组中每个所述数据表的类型,针对每个所述数据表中的关联键对每个所述数据表的行副本空间进行一维分区以及列副本空间进行一维或多维分区包括:
当所述数据表为事实表时,获取与所述事实表相关联的一维维度表的一维列副本分区和/或多维维度表的多维列副本分区;
从所述事实表中选择一个除所述关联键之外的其他字段作为分区键,并针对所述分区键对所述事实表的列副本空间以及行副本区间进行一维分区得到一维列副本分区以及一维行副本分区;
根据所述分区键对应的一维列副本分区以及所述与所述事实表相关联的一维维度表的一维列副本分区和/或多维维度表的多维列副本分区,组合得到所述事实表的多维列副本分区;
对所述分区键对应的一维行副本分区进行一维分区得到所述事实表的一维行副本分区。
5.如权利要求3所述的方法,其特征在于,所述获取所述多维维度表的多个关联键中的每个关联键分别对应的一维列副本分区以及一维行副本分区包括:
当所述表组中存在与所述多维维度表相关联的一维维度表时,获取每个所述相关联的一维维度表中的单个关联键对应的一维列副本分区以及一维行副本分区;
当所述表组中不存在与所述多维维度表相关联的一维维度表时,针对所述多维维度表的多个关联键中的每个关联键分别对所述多维维度表的列副本空间以及行副本空间进行一维分区得到所述每个关联键对应的一维列副本分区以及一维行副本分区。
6.如权利要求1所述的方法,其特征在于,所述根据所述表组中每个所述数据表的类型,针对每个所述数据表中的关联键对每个所述数据表的行副本空间进行一维分区以及列副本空间进行一维或多维分区之后,还包括:
根据得到的所述数据表的一维行副本分区,或得到的所述数据表的一维或多维列副本分区,创建同步队列;
根据所述同步队列,将主节点上的所述表组中的各数据表同步到从节点上。
7.如权利要求6所述的方法,其特征在于,所述根据得到的所述数据表的一维行副本分区,或得到的所述数据表的一维或多维列副本分区,创建同步队列包括:
当所述数据表为一维维度表时,根据所述一维维度表的一维行副本分区或一维列副本分区,创建一维同步队列。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于华为技术有限公司,未经华为技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201580001180.8/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种不良语料内容检测装置和方法
- 下一篇:一种数据交互处理方法、装置以及系统