[发明专利]数据存储方法及设备在审

专利信息
申请号: 201410333794.3 申请日: 2014-07-14
公开(公告)号: CN105446893A 公开(公告)日: 2016-03-30
发明(设计)人: 张信之 申请(专利权)人: 阿里巴巴集团控股有限公司
主分类号: G06F12/08 分类号: G06F12/08;G06F17/30
代理公司: 北京鸿德海业知识产权代理事务所(普通合伙) 11412 代理人: 倪志华
地址: 英属开曼群岛大开*** 国省代码: 开曼群岛;KY
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 数据 存储 方法 设备
【说明书】:

【技术领域】

发明涉及数据存储技术领域,尤其涉及一种数据存储方法及设备。

【背景技术】

Hbase是一个分布式的、面向列的开源数据库。作为Hbase的客户端,在向Hbase写入数据时首先会将数据写入到本地缓存,当本地缓存中的数据量超过阈值后,再将本地缓存中的数据一次性写入Hbase,这样可以保证客户端的吞吐量。但是,由于数据先写入客户端的本地缓存,只有本地缓存中的数据量超过阈值后才会被写入Hbase,因此,实时性很差。

【发明内容】

本发明的多个方面提供一种数据存储方法及设备,用以在保证数据存储设备的吞吐量的同时,提高数据存储的实时性。

本发明的一方面,提供一种数据存储方法,包括:

当有待存储数据到达时,按照第一数据存储逻辑将所述待存储数据存储到本地缓存和/或数据库中;

当预设的同步周期到达时,按照第二数据存储逻辑将所述本地缓存中的数据存储到所述数据库中。

本发明的另一方面,提供一种数据存储设备,包括:

存储模块,用于在有待存储数据到达时,按照第一数据存储逻辑将所述待存储数据存储到本地缓存和/或数据库中;

同步模块,用于在预设的同步周期到达时,按照第二数据存储逻辑将所述本地缓存中的数据存储到所述数据库中。

在本发明技术方案中,当有待存储数据到达时,按照第一数据存储逻辑将待存储数据存储到本地缓存和/或数据库中,其中,若先将待存储数据存到本地缓存,有利于提高数据存储设备的吞吐量,若直接将待存储数据存储到数据库中,则有利于提高数据存储的实时性;另外,还设置同步周期,当同步周期到达时,按照第二数据存储逻辑将本地缓存中的数据存储到数据库中,可以防止本地缓存中的数据长时间无法写入数据库的情况,一定程度上提高了将数据存储到数据库中的实时性。

【附图说明】

为了更清楚地说明本发明实施例中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作一简单地介绍,显而易见地,下面描述中的附图是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。

图1为本发明一实施例提供的数据存储方法的流程示意图;

图2为本发明另一实施例提供的数据存储方法的流程示意图;

图3为本发明一实施例提供的数据存储设备的结构示意图;

图4为本发明另一实施例提供的数据存储设备的结构示意图。

【具体实施方式】

为使本发明实施例的目的、技术方案和优点更加清楚,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。

图1为本发明一实施例提供的数据存储方法的流程示意图。如图1所示,该方法包括:

101、当有待存储数据到达时,按照第一数据存储逻辑将该待存储数据存储到本地缓存和/或数据库中。

102、当预设的同步周期到达时,按照第二数据存储逻辑将本地缓存中的数据存储到数据库中。

首先值得说明的是,上述步骤101和102之间并没有先后顺序,哪个条件先到达就先执行哪个条件对应的操作。详细来说,如果是先有待存储数据到达,则先按照第一数据存储逻辑将待存储数据存储到本地缓存和/或数据库中,之后,当预设的同步周期到达时,再按照第二数据存储逻辑将本地缓存中的数据存储到数据库中。如果是预设的同步周期先到达,则先按照第二数据存储逻辑将本地缓存中的数据存储到数据库中,之后,当有待存储数据到达时,再按照第一数据存储逻辑将待存储数据存储到本地缓存和/或数据库中。

本实施例对上述第一数据存储逻辑不做限定,凡是能够将待存储数据存储到本地缓存和/或数据库中的数据存储逻辑都适用于本发明。同理,本实施例对上述第二数据存储逻辑也不做限定,凡是能够在同步周期到达时将本地缓存中的数据存储到数据库中的数据存储逻辑也都适用于本发明。

在本实施例中,当有待存储数据到达时,数据存储设备可以按照第一数据存储逻辑将待存储数据存储到本地缓存和/或数据库中。本地缓存是指数据存储设备一侧的缓存空间。

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于阿里巴巴集团控股有限公司,未经阿里巴巴集团控股有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/201410333794.3/2.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top