[发明专利]一种存储数据的方法和数据库在审
申请号: | 201910430923.3 | 申请日: | 2019-05-22 |
公开(公告)号: | CN110134723A | 公开(公告)日: | 2019-08-16 |
发明(设计)人: | 魏毓航;王维栋;赵垠兰;黄晋;梁翠仪 | 申请(专利权)人: | 网易(杭州)网络有限公司 |
主分类号: | G06F16/2458 | 分类号: | G06F16/2458;G06F16/25;G06F16/27 |
代理公司: | 北京润泽恒知识产权代理有限公司 11319 | 代理人: | 莎日娜 |
地址: | 310052 浙江省杭州*** | 国省代码: | 浙江;33 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 热数据 数据源 冷数据 唯一标识码 时序数据 时间戳 数据库 储存条件 存储数据 数据库同步 分开存储 分离存储 数据读写 生成热 冷热 存储 采集 压缩 携带 转化 | ||
1.一种存储数据的方法,其特征在于,包括:
采集时序数据,并将所述时序数据转化为指定类型的数据源;其中,所述数据源包括生成所述时序数据的时间戳;
生成所述数据源的唯一标识码;
存储所述数据源到热数据库,并对所述数据源进行压缩生成热数据;所述热数据携带所述时间戳和唯一标识码;
采用所述时间戳判断所述热数据是否满足冷数据储存条件;若是,则根据所述唯一标识码将满足所述冷数据储存条件的所述热数据从所述热数据库同步到冷数据库,以使所述热数据与所述冷数据分开存储。
2.根据权利要求1所述的方法,其特征在于,所述方法还包括:
生成所述数据源的数据索引,其中,所述数据索引与对应的数据源分开存储;
采用所述数据索引进行热数据和冷数据查询。
3.根据权利要求1所述的方法,其特征在于,所述采用所述时间戳判断所述热数据是否满足冷数据储存条件,包括:
确定所述热数据的存储时间;
采用所述存储时间更新所述热数据对应实体的更新时间;
采用所述时间戳和所述更新时间,判断所述热数据是否满足冷数据储存条件。
4.根据权利要求3所述的方法,其特征在于,所述采用所述时间戳和所述更新时间,判断所述热数据是否满足冷数据储存条件,包括:
获取服务器当前时间;
当所述服务器当前时间与所述时间戳的差值大于预设保存时限,并且,所述服务器当前时间与所述更新时间的差值大于预设超时时限时,则判定所述热数据满足冷数据储存条件。
5.根据权利要求4所述的方法,其特征在于,在所述存储所述数据源到热数据库,并对所述数据源进行压缩生成热数据之后,还包括:
生成所述热数据的索引;
持久化所述热数据的索引到所述热数据库。
6.根据权利要求5所述的方法,其特征在于,所述根据所述唯一标识码将满足所述冷数据储存条件的所述热数据从所述热数据库同步到冷数据库,以使所述热数据与所述冷数据分开存储,包括:
采用所述热数据的索引,以实体为维度获取满足所述冷数据储存条件的所有热数据的唯一标识码;
采用所有所述热数据的唯一标识码从所述热数据库获取目标数据;
同步所述目标数据到所述冷数据库,以使所述热数据与所述冷数据分开存储。
7.根据权利要求1或2所述的方法,其特征在于,所述采集时序数据,并将所述时序数据转化为指定类型的数据源,包括:
采用指定接口采集所述任意类型的时序数据;
通过所述指定接口将所述任意类型的时序数据封装为指定类型的数据源。
8.根据权利要求1或2所述的方法,其特征在于,所述采集时序数据,并将所述时序数据转化为指定类型的数据源,包括:
采集任意类型的时序数据;
封装所述任意类型的时序数据,生成指定类型的数据源。
9.根据权利要求1或2所述的方法,其特征在于,所述指定类型为实体类型。
10.一种存储数据的数据库,其特征在于,包括:
数据采集模块,用于采集时序数据,并将所述时序数据转化为指定类型的数据源;其中,所述数据源包括生成所述时序数据的时间戳;
标识码生成模块,用于生成所述数据源的唯一标识码;
热数据存储模块,用于存储所述数据源到热数据库,并对所述数据源进行压缩生成热数据;所述热数据携带所述时间戳和唯一标识码;
热数据同步模块,用于采用所述时间戳判断所述热数据是否满足冷数据储存条件;若是,则根据所述唯一标识码将满足所述冷数据储存条件的所述热数据从所述热数据库同步到冷数据库,以使所述热数据与所述冷数据分开存储。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于网易(杭州)网络有限公司,未经网易(杭州)网络有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910430923.3/1.html,转载请声明来源钻瓜专利网。