[发明专利]数据存储方法及设备在审
申请号: | 201410333794.3 | 申请日: | 2014-07-14 |
公开(公告)号: | CN105446893A | 公开(公告)日: | 2016-03-30 |
发明(设计)人: | 张信之 | 申请(专利权)人: | 阿里巴巴集团控股有限公司 |
主分类号: | G06F12/08 | 分类号: | G06F12/08;G06F17/30 |
代理公司: | 北京鸿德海业知识产权代理事务所(普通合伙) 11412 | 代理人: | 倪志华 |
地址: | 英属开曼群岛大开*** | 国省代码: | 开曼群岛;KY |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 数据 存储 方法 设备 | ||
【技术领域】
本发明涉及数据存储技术领域,尤其涉及一种数据存储方法及设备。
【背景技术】
Hbase是一个分布式的、面向列的开源数据库。作为Hbase的客户端,在向Hbase写入数据时首先会将数据写入到本地缓存,当本地缓存中的数据量超过阈值后,再将本地缓存中的数据一次性写入Hbase,这样可以保证客户端的吞吐量。但是,由于数据先写入客户端的本地缓存,只有本地缓存中的数据量超过阈值后才会被写入Hbase,因此,实时性很差。
【发明内容】
本发明的多个方面提供一种数据存储方法及设备,用以在保证数据存储设备的吞吐量的同时,提高数据存储的实时性。
本发明的一方面,提供一种数据存储方法,包括:
当有待存储数据到达时,按照第一数据存储逻辑将所述待存储数据存储到本地缓存和/或数据库中;
当预设的同步周期到达时,按照第二数据存储逻辑将所述本地缓存中的数据存储到所述数据库中。
本发明的另一方面,提供一种数据存储设备,包括:
存储模块,用于在有待存储数据到达时,按照第一数据存储逻辑将所述待存储数据存储到本地缓存和/或数据库中;
同步模块,用于在预设的同步周期到达时,按照第二数据存储逻辑将所述本地缓存中的数据存储到所述数据库中。
在本发明技术方案中,当有待存储数据到达时,按照第一数据存储逻辑将待存储数据存储到本地缓存和/或数据库中,其中,若先将待存储数据存到本地缓存,有利于提高数据存储设备的吞吐量,若直接将待存储数据存储到数据库中,则有利于提高数据存储的实时性;另外,还设置同步周期,当同步周期到达时,按照第二数据存储逻辑将本地缓存中的数据存储到数据库中,可以防止本地缓存中的数据长时间无法写入数据库的情况,一定程度上提高了将数据存储到数据库中的实时性。
【附图说明】
为了更清楚地说明本发明实施例中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作一简单地介绍,显而易见地,下面描述中的附图是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1为本发明一实施例提供的数据存储方法的流程示意图;
图2为本发明另一实施例提供的数据存储方法的流程示意图;
图3为本发明一实施例提供的数据存储设备的结构示意图;
图4为本发明另一实施例提供的数据存储设备的结构示意图。
【具体实施方式】
为使本发明实施例的目的、技术方案和优点更加清楚,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
图1为本发明一实施例提供的数据存储方法的流程示意图。如图1所示,该方法包括:
101、当有待存储数据到达时,按照第一数据存储逻辑将该待存储数据存储到本地缓存和/或数据库中。
102、当预设的同步周期到达时,按照第二数据存储逻辑将本地缓存中的数据存储到数据库中。
首先值得说明的是,上述步骤101和102之间并没有先后顺序,哪个条件先到达就先执行哪个条件对应的操作。详细来说,如果是先有待存储数据到达,则先按照第一数据存储逻辑将待存储数据存储到本地缓存和/或数据库中,之后,当预设的同步周期到达时,再按照第二数据存储逻辑将本地缓存中的数据存储到数据库中。如果是预设的同步周期先到达,则先按照第二数据存储逻辑将本地缓存中的数据存储到数据库中,之后,当有待存储数据到达时,再按照第一数据存储逻辑将待存储数据存储到本地缓存和/或数据库中。
本实施例对上述第一数据存储逻辑不做限定,凡是能够将待存储数据存储到本地缓存和/或数据库中的数据存储逻辑都适用于本发明。同理,本实施例对上述第二数据存储逻辑也不做限定,凡是能够在同步周期到达时将本地缓存中的数据存储到数据库中的数据存储逻辑也都适用于本发明。
在本实施例中,当有待存储数据到达时,数据存储设备可以按照第一数据存储逻辑将待存储数据存储到本地缓存和/或数据库中。本地缓存是指数据存储设备一侧的缓存空间。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于阿里巴巴集团控股有限公司,未经阿里巴巴集团控股有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201410333794.3/2.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置