[发明专利]存储时间序列数据的方法和装置有效

专利信息
申请号: 201510608162.8 申请日: 2015-09-22
公开(公告)号: CN105260404B 公开(公告)日: 2019-03-26
发明(设计)人: 薛英飞;赖春波;王仆;赵博;郑锋 申请(专利权)人: 北京百度网讯科技有限公司
主分类号: G06F16/22 分类号: G06F16/22;G06F16/2458
代理公司: 北京英赛嘉华知识产权代理有限责任公司 11204 代理人: 王达佐;马晓亚
地址: 100085 北京市*** 国省代码: 北京;11
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 存储 时间 序列 数据 方法 装置
【说明书】:

本申请公开了一种存储时间序列数据的方法和装置。所述存储时间序列数据的方法的一具体实施方式包括:根据时间序列数据的时间点,将时间序列数据的指标值存入时间区间数据表中,其中,时间序列数据包括以下信息:时间点、与时间点关联的指标值,时间区间数据表中的每条数据行记录预定长度的时间区间内的至少一个时间点所关联的指标值,各个时间点之间相隔预定的时间长度,每个时间点占用内存的一个存储区,每个存储区包括预定个数的字节,每个时间点所关联的指标值被填入时间点所占用的存储区中;将没有填入数据的存储区进行数据压缩处理,得到时间区间压缩数据;将时间区间压缩数据写入磁盘。该实施方式减少了磁盘存储空间的占用。

技术领域

本申请涉及计算机技术领域,具体涉及数据库技术领域,尤其涉及存储时间序列数据的方法和装置。

背景技术

时间序列数据是一系列有序的数据,是在不同时间点上收集到的数据。这类数据反映了某一事物、现象、指标等随时间的变化状态或程度。由于时间序列数据通常是相等时间间隔的采样数据,现有的存储时间序列数据的方法通常为:根据上述时间间隔,为每个固定的时间点预留一个存储区。当接收到一个时间点的时间序列数据时,将该数据填入预留给该时间点的存储区中。

然而,目前在实际的情况中,很多时间序列数据不一定在每个时间间隔后都会产生,甚至时间间隔有可能会发生变化,这导致了有很多的存储区中的数据为空值状态,如果将这些包含空值的数据直接写入磁盘,会产生较多的存储空间占用,并增加了后续读写数据时的IO流量。

发明内容

本申请的目的在于提出一种存储时间序列数据的方法和装置,来解决以上背景技术部分提到的技术问题。

第一方面,本申请提供了一种存储时间序列数据的方法,所述方法包括:根据时间序列数据的时间点,将所述时间序列数据的指标值存入时间区间数据表中,其中,所述时间序列数据包括以下信息:时间点、与所述时间点关联的指标值,所述时间区间数据表中的每条数据行用于记录预定长度的时间区间内的至少一个时间点所关联的指标值,所述至少一个时间点中各个时间点之间相隔预定的时间长度,每个所述时间点占用内存的一个存储区,每个所述存储区包括预定个数的字节,每个所述时间点所关联的指标值被填入所述时间点所占用的存储区中;将没有填入数据的存储区进行数据压缩处理,得到时间区间压缩数据;将所述时间区间压缩数据写入磁盘。

在一些实施例中,所述时间区间数据表包括主键列,所述时间区间数据表中的每条数据行的主键值包括表示所述数据行对应的时间区间的起点的起始时间点值。

在一些实施例中,所述根据所述时间序列数据的时间,将所述时间序列数据的指标值存入时间区间数据表中,包括:根据所述时间序列数据的时间点,在时间区间数据表中匹配包含所述时间序列数据的时间点的时间区间所对应的数据行;如果匹配到所述对应的数据行,则将所述时间序列数据的指标值填入所述数据行中与所述时间点对应的存储区中;如果没有匹配到所述数据行,则新增一条新数据行,所述新增的数据行的主键值包括所述时间序列数据的时间点,所述新增的数据行的第一个存储区所填入的数据为所述时间序列数据的指标值。

在一些实施例中,所述时间序列数据还包括:数据来源主体标识码信息,其中,所述数据来源主体标识码信息为所述时间序列数据的来源主体的标识码。

在一些实施例中,所述每条数据行的主键值还包括数据来源主体标识码,所述数据来源主体标识码为所述数据行的指标值数据的来源主体的标识码。

在一些实施例中,所述根据所述时间序列数据的时间点,在时间区间数据表中匹配包含所述时间序列数据的时间点的时间区间所对应的数据行,包括:根据所述时间序列数据的时间点以及数据来源主体标识码,在时间区间数据表中匹配包含所述时间序列数据的时间点的时间区间并且主键值包括所述时间序列数据的数据来源主体标识码的数据行。

在一些实施例中,以及所述新增的数据行的主键值还包括所述时间序列数据的数据来源主体标识码。

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京百度网讯科技有限公司,未经北京百度网讯科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/201510608162.8/2.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top