[发明专利]一种增量生成方法、装置以及一种数据更新方法、装置在审
申请号: | 201711330795.2 | 申请日: | 2017-12-13 |
公开(公告)号: | CN110147359A | 公开(公告)日: | 2019-08-20 |
发明(设计)人: | 陶涛 | 申请(专利权)人: | 北京奇虎科技有限公司 |
主分类号: | G06F16/21 | 分类号: | G06F16/21;G06F16/23;G06F16/22 |
代理公司: | 北京鼎佳达知识产权代理事务所(普通合伙) 11348 | 代理人: | 刘铁生;孟阿妮 |
地址: | 100088 北京市西城区新*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 存储形式 数据更新 优势条件 记录 计算机技术领域 键值数据库 外部系统 影响系统 增量记录 预设 内存 占用 监控 | ||
本发明公开了一种增量生成方法、装置以及一种数据更新方法、装置,涉及计算机技术领域。所述方法,包括:监控是否接收到外部系统对键值数据库的更改操作;如果接收到所述更改操作,则将所述更改操作对应的原始key和相应的原始value记录到预设的特殊key对应的特殊value中。解决了现有的增量记录方法无法在具备key‑value存储形式的优势条件下记录增量,取得了在具备key‑value存储形式的优势条件下记录增量,避免占用内存较多,容易影响系统的有益效果。
技术领域
本发明涉及计算机技术领域,具体涉及一种增量生成方法、装置以及一种数据更新方法、装置。
背景技术
随着互联网web2.0(第二代互联网)网站的兴起,传统的关系数据库在应付web2.0网站,特别是超大规模和高并发的SNS(Social Networking Services,社交网络服务)类型的web2.0纯动态网站已经显得力不从心,暴露了很多难以克服的问题,而非关系型的数据库则由于其本身的特点得到了非常迅速的发展。NoSQL(NoSQL=Not Only SQL)数据库的产生就是为了解决大规模数据集合多重数据种类带来的挑战,尤其是大数据应用难题。键值数据库即是一种NoSQL数据库。
在键值数据库中,是采用key-value对的形式进行数据存储,而且key-value存储一般都是根据key获取value,保存的时候只要把key-value保存起来就行了。在NoSQL数据库中,数据在不断地更新,可实时获取最新的客户的所有的数据。但是却无法获取数据的实时变化量,即增量。而且,如果利用表格的方式记录增量,那么则需要针对同一数据同时建立两张表,一张用以记录数据,一张用以记录数据的增量,那么此时不具备key-value存储形式的优势,而且会导致占用内存较多,容易影响系统运行效率。
发明内容
鉴于上述问题,提出了本发明以便提供一种克服上述问题或者至少部分地解决上述问题的一种增量生成方法、装置以及一种数据更新方法、装置。
依据本发明的一个方面,提供了一种增量生成方法,包括:
监控是否接收到外部系统对键值数据库的更改操作;
如果接收到所述更改操作,则将所述更改操作对应的原始key和相应的原始value记录到预设的特殊key对应的特殊value中。
可选地,所述监控是否接收到外部系统对键值数据库的更改操作的步骤之前,还包括:
在键值数据库中创建所述特殊key-特殊value对。
可选地,所述将所述更改操作对应的原始key和相应的原始value记录到预设的特殊key对应的特殊value中的步骤,包括:
当所述更改操作为新增操作、或修改操作时,将所述新增操作、或修改操作对应的原始key和相应的原始value,写入所述特殊key对应的特殊value中;
当所述更改操作为删除操作时,将所述删除操作对应的原始key创建为空值的原始value,并将所述原始key和所述原始value写入所述特殊key对应的特殊value中。
可选地,所述将所述更改操作对应的原始key和相应的原始value记录到预设的特殊key对应的特殊value中的步骤,包括:
对于同一个原始key,按相应的原始key和原始value的写入顺序加上版本编号。
可选地,所述将所述更改操作对应的原始key和相应的原始value记录到预设的特殊key对应的特殊value中的步骤,包括:
判断所述特殊value中是否有所述原始key的记录;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京奇虎科技有限公司,未经北京奇虎科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201711330795.2/2.html,转载请声明来源钻瓜专利网。