[发明专利]数据比对方法、装置和存储介质在审
申请号: | 202011273307.0 | 申请日: | 2020-11-13 |
公开(公告)号: | CN112380203A | 公开(公告)日: | 2021-02-19 |
发明(设计)人: | 郭腾达 | 申请(专利权)人: | 深圳前海微众银行股份有限公司 |
主分类号: | G06F16/215 | 分类号: | G06F16/215;G06F16/22 |
代理公司: | 北京同立钧成知识产权代理有限公司 11205 | 代理人: | 张晓霞;臧建明 |
地址: | 518027 广东省深圳市*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 数据 方法 装置 存储 介质 | ||
本申请提供一种数据比对方法、装置和存储介质,该方法包括:获至少一个比对数据块相对于标准数据块的差异率,每个所述比对数据块所含数据的行数和每个标准数据块所包含数据的行数相同,所述至少一个比数据块包括所有待比对的数据块或者当前待比对的第一比对数据块之前的据块;若所述差异率小于预设值,则确定所述第一比对数据块的第一强哈值以及与所述第一比对数据块对应的第一标准数据块的第二强哈希值;若述第一强哈希值与所述第二强哈希值不同,则确定所述第一比对数据块与述第一标准数据块比对失败。本申请提供的数据比对方法、装置和存储质可以提高数据比对的效率。
技术领域
本发明涉及数据处理技术,尤其涉及一种数据比对方法、装置和存储介质。
背景技术
随着计算机技术的发展,越来越多的技术(大数据、分布式、人工智能等)应用在金融领域,传统金融业正在逐步向金融科技(Fintech)转变,但由于金融行业的安全性、实时性要求,也对服务请求技术提出了更高的要求。目前,在金融科技领域,为了保证数据的准确性,通常需要对数据进行测试,也即将实际数据与标准数据进行比对,以测试数据是否发生变化。
目前,在进行数据比对时,通常会将需要比对的数据和标准数据按照同样的方式划分为多个数据块,分别计算每个数据块的弱哈希值以及每个标准数据块的弱哈希值,对于需要比对的某一个数据块,若该数据块的弱哈希值与对应的标准数据块的弱哈希值不同,则再计算这两个数据块的强哈希值,并通过比较强哈希值,从而确定出这两个数据块中的数据是否相同。
然而,在对数据库中的数据进行比对时,需要比对的数据中,在大部分数据均与标准数据相同情况下,采用上述方式进行数据比对时,花费时间较多,会造成数据比对的效率较低。
发明内容
为解决现有技术中存在的问题,本发明提供一种数据比对方法、装置和存储介质,可以提高数据比对的效率。
第一方面,本申请实施例提供一种数据比对方法,包括:
获取至少一个比对数据块相对于标准数据块的差异率,每个所述比对数据块所包含数据的行数和每个标准数据块所包含数据的行数相同,所述至少一个比对数据块包括所有待比对的数据块或者当前待比对的第一比对数据块之前的数据块;
若所述差异率小于预设值,则确定所述第一比对数据块的第一强哈希值以及与所述第一比对数据块对应的第一标准数据块的第二强哈希值;
若所述第一强哈希值与所述第二强哈希值不同,则确定所述第一比对数据块与所述第一标准数据块比对失败。
可选的,若所述至少一个比对数据块包括当前待比对的第一比对数据块之前的数据块;
所述获取至少一个比对数据块相对于标准数据块的差异率,包括:
获取所述当前待比对的第一比对数据块之前的数据块的第一数量;
确定所述当前待比对的第一比对数据块之前的数据块中比对失败的数据块的第二数量;
根据所述第二数量和所述第一数量的比值,确定所述差异率。
可选的,若所述至少一个比对数据块包括所有待比对数据块;
所述获取至少一个比对数据块相对于标准数据块的差异率,包括:
获取所述所有待比对数据块中所包括的所有数据的第一行数和多个标准数据块中所包括的所有数据的第二行数;
根据所述第一行数和所述第二行数的差值,确定所述差异率。
可选的,所述第一比对数据块为所有比对数据块中除最后一个比对数据块之外的其他数据块;
所述确定所述第一比对数据块与所述第一标准数据块比对失败之后,所述方法还包括:
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于深圳前海微众银行股份有限公司,未经深圳前海微众银行股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202011273307.0/2.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置