[发明专利]基于HBase的数据回滚方法、系统、设备及介质在审
申请号: | 202110440310.5 | 申请日: | 2021-04-22 |
公开(公告)号: | CN113076378A | 公开(公告)日: | 2021-07-06 |
发明(设计)人: | 邹普 | 申请(专利权)人: | 深圳前海微众银行股份有限公司 |
主分类号: | G06F16/27 | 分类号: | G06F16/27;G06F16/2458;G06F16/21;G06F16/23 |
代理公司: | 深圳市世纪恒程知识产权代理事务所 44287 | 代理人: | 胡拥军 |
地址: | 518000 广东省深圳市前海深港合作区前*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 基于 hbase 数据 方法 系统 设备 介质 | ||
本发明涉及金融科技(Fintech)技术领域,公开了一种基于HBase的数据回滚方法,包括:在接收数据查询请求时,获取数据查询请求携带的待查询账户和待查询日期;若根据待查询日期确定需要进行数据回滚,则获取所述待查询账户对应的脏数据行键区间;根据所述脏数据行键区间对HBase数据库中的对应脏数据进行回滚,以在根据所述数据查询请求执行数据查询流程时,输出数据查询结果为空的响应消息。通过对来自业务层面的数据查询请求进行拦截并进行回滚判断,对于涉及脏数据的数据查询请求,会先将脏数据回滚,才会放行数据查询请求,以避免将脏数据输出给业务层面,实现了业务层面的数据回滚,进而提升了HBase数据库的可靠性。
技术领域
本发明涉及金融科技(Fintech)技术领域,尤其涉及基于HBase的数据回滚方法、系统、设备及计算机存储介质。
背景技术
随着计算机技术的发展,越来越多的技术(大数据、分布式、人工智能等)应用在金融领域,传统金融业正在逐步向金融科技(Fintech)转变,但由于金融行业的安全性、通用性要求,也对数据回滚技术提出了更高的要求。
对于关系数据库来说,在一张2.5亿条记录的表里面进行SQL查询,效率是极其低下的,为了解决此类问题,非关系型分布式存储系统应运而生,HBase是一个高可靠性、高性能、面向列、可伸缩的分布式存储系统,利用HBase技术搭建的大规模结构化存储集群为超大规模和高并发的海量数据实时响应系统提供了一个很好的解决方案。
但是,在实际应用场景中,难免会出现数据库中某一天或几天的数据异常的情况,这种情况常常需要进行回滚,以将数据库中的数据回滚到修改之前的样子,传统关系数据库的比较成熟回滚方案是事务回滚,但是HBase没有事务的概念,所以事务回滚在基于HBase的场景中无法适用。
发明内容
本发明的主要目的在于提出一种基于HBase的数据回滚方法、系统、设备及计算机存储介质,旨在提供一套基于HBase的数据回滚方案,从而提升HBase数据库运行的可靠性。
为实现上述目的,本发明提供一种基于HBase的数据回滚方法,所述基于HBase的数据回滚方法包括如下步骤:
接收数据查询请求,获取所述数据查询请求携带的待查询账户和待查询日期;
若根据所述待查询日期确定需要进行数据回滚,则获取所述待查询账户对应的脏数据行键区间;
根据所述脏数据行键区间对HBase数据库中的对应脏数据进行回滚,以在根据所述数据查询请求执行数据查询流程时,输出数据查询结果为空的响应消息。
可选地,所述获取所述数据查询请求携带的待查询账户和待查询日期的步骤之后,还包括:
获取基于所述HBase数据库的批量日期表中时间戳最新的第一批量日期,以及所述批量日期表中日期最大的第二批量日期;
若所述第一批量日期小于所述第二批量日期,且所述待查询日期大于或等于所述第一批量日期,且小于或等于所述第二批量日期,则确定需要进行数据回滚,执行步骤:获取所述待查询账户对应的脏数据行键区间。
可选地,所述获取所述待查询账户对应的脏数据行键区间的步骤包括:
根据所述待查询账户和所述第一批量日期确定区间下限,根据所述待查询账户和所述第二批量日期确定区间上限;
根据所述区间下限和所述区间上限确定脏数据行键区间。
可选地,所述获取基于所述HBase数据库的批量日期表中时间戳最新的第一批量日期,以及所述批量日期表中日期最大的第二批量日期的步骤之前,还包括:
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于深圳前海微众银行股份有限公司,未经深圳前海微众银行股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110440310.5/2.html,转载请声明来源钻瓜专利网。
- 上一篇:一种三维光关节蛇链式管道激光清洗装置
- 下一篇:一种饲料烘干机
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置