[发明专利]一种实现数据备份的方法、装置及设备在审
申请号: | 202011640262.6 | 申请日: | 2020-12-31 |
公开(公告)号: | CN112631839A | 公开(公告)日: | 2021-04-09 |
发明(设计)人: | 张磊;张玮;孙蕾;王凯 | 申请(专利权)人: | 中国农业银行股份有限公司 |
主分类号: | G06F11/14 | 分类号: | G06F11/14;G06F11/20;G06F16/182 |
代理公司: | 北京集佳知识产权代理有限公司 11227 | 代理人: | 赵晓荣 |
地址: | 100005 北*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 实现 数据 备份 方法 装置 设备 | ||
本申请实施例公开了一种实现数据备份的方法、装置及设备,通过从主集群的缓存区域中获取包括待写入数据的第一数据表,根据第一数据表建立备集群的第二数据表,通过采用异步备份的方式,实现在不影响主集群的运行情况的基础上进行数据备份。再从主集群的储存区域中获取第三数据表;比较第三数据表中的服务数据与第二数据表中的备份数据是否一致;若不一致,将服务数据中与备份数据不同的数据作为区别数据;利用从主集群的储存区域中获取区别数据对应的目标储存文件,将区别数据写入第二数据表。实现对主集群和备集群中的数据进行一致性校验,当主集群和备集群中的数据不一致时,实现对区别数据的重新备份,满足在极端情况下的数据备份的需求。
技术领域
本申请涉及数据处理领域,具体涉及一种实现数据备份的方法、装置及设备。
背景技术
HBase数据库中储存有较多的数据,在当HBase数据库中的集群发生故障时,会导致对外提供服务失败。为了保证HBase数据库可以正常稳定地对外提供服务,通常在HBase数据库中建立主集群和备集群,并将主集群的数据备份至备集群,以便在主集群发生故障时切换至备集群对外提供服务。
目前,HBase数据库的主备集群在实现数据备份时容易受到主集群运行状态的影响。在当主集群宕机时会导致部分数据无法实现备份,不能保证主备集群的数据一致性。
发明内容
有鉴于此,本申请实施例提供一种实现数据备份的方法、装置及设备,能够在主集群发生故障后确保主备集群中的数据一致,满足数据备份需求。
为解决上述问题,本申请实施例提供的技术方案如下:
第一方面,本申请提供一种实现数据备份的方法,所述方法包括:
从主集群的缓存区域中获取包括待写入数据的第一数据表,根据所述第一数据表建立备集群的第二数据表;
从所述主集群的储存区域中获取第三数据表,所述第三数据表是通过将所述第一数据表中的待写入数据写入至所述主集群建立的;
比较所述第三数据表中的服务数据与所述第二数据表中的备份数据是否一致;
若不一致,将所述服务数据中与所述备份数据不同的数据作为区别数据;
从所述主集群的储存区域中获取所述区别数据对应的目标储存文件,利用所述目标储存文件将所述区别数据写入所述第二数据表。
在一种可能的实现方式中,所述从所述主集群的储存区域中获取所述区别数据对应的目标储存文件,利用所述目标储存文件将所述区别数据写入所述第二数据表,包括:
从所述第三数据表中获取所述区别数据对应的目标数据标识;
根据所述目标数据标识确定目标储存文件的目标文件信息,利用所述目标文件信息生成任务信息;
将所述第三数据表中具有区别数据的数据表作为第一区别数据表;
利用所述第一区别数据表中区别数据对应的目标数据标识,获取目标储存文件;
利用所述任务信息和所述目标储存文件,建立同步任务;
判断所述同步任务是否成功建立;若是,调用同步工具执行所述同步任务,以使所述同步工具根据所述目标储存文件将所述区别数据写入第二区别数据表中;所述第二区别数据表为所述第二数据表中与所述第一区别数据表对应的数据表。
在一种可能的实现方式中,所述利用所述第一区别数据表中区别数据对应的目标数据标识,获取目标储存文件,包括:
从所述第一区别数据表中获取所述首个区别数据的目标数据标识;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中国农业银行股份有限公司,未经中国农业银行股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202011640262.6/2.html,转载请声明来源钻瓜专利网。
- 上一篇:一种数据处理方法和相关装置
- 下一篇:一种脚本格式化方法及装置
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置