[发明专利]时序数据库的分布式实现方法、装置、设备及存储介质在审
申请号: | 201810489971.5 | 申请日: | 2018-05-21 |
公开(公告)号: | CN108664660A | 公开(公告)日: | 2018-10-16 |
发明(设计)人: | 钟昌寿 | 申请(专利权)人: | 北京五八信息技术有限公司 |
主分类号: | G06F17/30 | 分类号: | G06F17/30 |
代理公司: | 工业和信息化部电子专利中心 11010 | 代理人: | 焉明涛 |
地址: | 100083 北京市海淀区学清*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 数据分片 时序数据库 数据域 分布式实现 存储介质 写入 长度确定 分片数据 非固定 时间段 细粒度 集群 场景 查询 | ||
1.一种时序数据库的分布式实现方法,其特征在于,所述方法包括:
根据对数据域设置的时间长度确定分片单位;
根据所述分片单位对数据表中数据进行数据分片;
将得到的各个分片数据写入集群中相应数据域。
2.如权利要求1所述的方法,其特征在于,所述将得到的各个分片数据写入集群中相应数据域之前,包括:
在所述集群为所述各个分片数据创建所述相应数据域。
3.如权利要求2所述的方法,其特征在于,所述集群包括一个或多个组;在所述集群包括多个组时,所述在所述集群为所述各个分片数据创建所述相应数据域,包括:
在所述集群的不同组为所述各个分片数据创建所述相应数据域。
4.如权利要求3所述的方法,其特征在于,所述在所述集群的不同组为所述各个分片数据创建所述相应数据域,包括:对于时间上相邻的任意两个分片数据:
在所述集群的第一组上,为在前的分片数据创建对应的第一数据域;
判断是否需要将在后的分片数据存储到所述第一组;
若是,根据所述时间长度,修改所述第一数据域的结束时间;
若否,在所述集群的第二组上,为所述在后的分片数据创建对应的第二数据域。
5.如权利要求4所述的方法,其特征在于,所述判断是否需要将在后的分片数据存储到所述第一组,包括:
当所述在后的分片数据即将达到时,预先分配在后的分片数据的存储位置;
根据所述预先分配的存储位置,判断是否需要将在后的分片数据存储到所述第一组。
6.如权利要求3所述的方法,其特征在于,每个组包括主设备和备份设备;所述在所述集群的不同组为所述各个分片数据创建所述相应数据域,包括:
在所述集群的不同组的主设备上,为所述各个分片数据创建所述相应数据域;
通过异步同步方式,将所述主设备的分片数据同步到备份设备。
7.如权利要求3所述的方法,其特征在于,所述方法还包括:
检测到所述集群的读写性能或容量达到相应的扩容阈值;
发出扩容提示。
8.如权利要求2-7中任意一项所述的方法,其特征在于,所述方法还包括:
在确定需要向所述集群写入乱序数据时,根据所述乱序数据的时间戳匹配归属的数据域;
在没有匹配时,在所述集群的第二组上,为所述乱序数据创建第三数据域。
9.一种时序数据库的分布式实现装置,其特征在于,所述装置包括:
确定模块,用于根据对数据域设置的时间长度确定分片单位;
分片模块,用于根据所述分片单位对数据表中数据进行数据分片;
存储模块,用于将得到的各个分片数据写入集群中相应数据域。
10.如权利要求9所述的装置,其特征在于,所述装置还包括:
创建模块,用于将得到的各个分片数据写入集群中相应数据域之前,在所述集群为所述各个分片数据创建所述相应数据域。
11.如权利要求10所述的装置,其特征在于,所述集群包括一个或多个组;在所述集群包括多个组时,所述存储模块,具体用于在所述集群的不同组为所述各个分片数据创建所述相应数据域。
12.如权利要求11所述的装置,其特征在于,所述创建模块包括:
第一创建单元,用于对于时间上相邻的任意两个分片数据:在所述集群的第一组上,为在前的分片数据创建对应的第一数据域;
判断单元,用于判断是否需要将在后的分片数据存储到所述第一组;
修改单元,用于若所述判断单元判定为是时,根据所述时间长度,修改所述第一数据域的结束时间;
第二创建单元,用于若所述判断单元判定为否时,在所述集群的第二组上,为所述在后的分片数据创建对应的第二数据域。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京五八信息技术有限公司,未经北京五八信息技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201810489971.5/1.html,转载请声明来源钻瓜专利网。