[发明专利]数据校验方法、设备和存储介质有效
申请号: | 202010252727.4 | 申请日: | 2020-04-01 |
公开(公告)号: | CN111611253B | 公开(公告)日: | 2023-08-08 |
发明(设计)人: | 易虎刚;王龙救;王涛;张永成 | 申请(专利权)人: | 石化盈科信息技术有限责任公司 |
主分类号: | G06F16/23 | 分类号: | G06F16/23;G06F16/27 |
代理公司: | 北京聿宏知识产权代理有限公司 11372 | 代理人: | 吴大建;金淼 |
地址: | 100007 北京市东城区东*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 数据 校验 方法 设备 存储 介质 | ||
1.一种数据校验方法,其特征在于,包括:
按照预设的同一抽取条件,分别抽取源端中需校对源数据和复制端中需校对复制数据,并存储至校对数据库进行校对,直到所述源端的所有源数据和所述复制端中的所有复制数据被抽取完后,得到校对结果;
若所述校对结果表示有差异,对所述校对结果进行迭代检验,直到满足检验停止条件后,得到检验结果;
若所述检验结果表示所述校对结果为真,确定所述源端的所有源数据与所述复制端的所有复制数据不一致;
若所述检验结果表示所述校对结果为假,确定所述源端的所有源数据与所述复制端的所有复制数据一致;
所述对校对结果进行迭代检验,直到满足检验停止条件后,得到检验结果,包括:
将所述校对结果对应的差异数据存储至临时数据库,进行迭代检验,直到满足检验停止条件后,得到检验结果;
在每次迭代检验过程中,分别抽取源端中与所述差异数据关联的关联源数据和所述复制端中与所述差异数据关联的关联复制数据进行检验,直到遍历所述临时数据库中所有差异数据后,得到当次检验结果;
判断当次检验结果是否有差异;
若当次检验结果表示无差异,则确定校对结果为假作为所述检验结果;
若当次检验结果表示有差异,则判断当次迭代检验对应的迭代次数是否达到预设次数;
若当次迭代检验对应的迭代次数未达到预设次数,则继续抽取临时数据库中差异数据的关联源数据和差异数据的关联复制数据,进行下一次迭代检验;
若当次迭代检验对应的迭代次数达到预设次数,确定校对结果为真作为所述检验结果。
2.根据权利要求1所述的数据校验方法,其特征在于,所述预设次数为固定值,或,所述预设次数根据源数据的产生速度和/或源数据的复制速度确定。
3.根据权利要求1所述的数据校验方法,其特征在于,所述校对结果和所述当次检验结果均包括相等、不等、缺少复制数据和复制数据多余中的至少一种;
若所述校对结果包括所述不等、所述缺少复制数据和所述复制数据多余中的至少一种,则表示有差异;
若所述校对结果为所述相等,则表示无差异;
若所述当次检验结果包括所述不等、所述缺少复制数据和所述复制数据多余中的至少一种,则表示有差异;
若所述当次检验结果为所述相等,则表示无差异。
4.根据权利要求3所述的数据校验方法,其特征在于,所述相等为目标源数据的主键与目标复制数据的主键相同,且所述目标源数据的数据内容与所述目标复制数据的数据内容相同;
所述不等为目标源数据的主键与目标复制数据的主键相同,所述目标源数据的数据内容与所述目标复制数据的数据内容不相同;
所述缺少复制数据为目标源数据的主键与目标复制数据的主键不相同,且只存在所述目标源数据的数据内容;
所述复制数据多余为目标源数据的主键与目标复制数据的主键不相同,且只存在所述目标复制数据的数据内容;
其中,所述目标源数据包括所述需校对源数据或所述关联源数据;所述目标复制数据包括所述需校对复制数据或所述关联复制数据。
5.根据权利要求4所述的数据校验方法,其特征在于,所述确定所述源端的所有源数据与所述复制端的所有复制数据不一致之后,还包括:
对所述复制端进行数据修复。
6.根据权利要求5所述的数据校验方法,其特征在于,所述对所述复制端进行数据修复,包括:
若所述当次检验结果为不等,将当前差异数据与所述源端的源数据进行主键关联,得到修复源数据,将所述目标修复源数据覆盖与所述修复源数据对应的被修复复制数据;
若所述检验结果为缺少复制数据,将当前差异数据与所述源端的源数据进行主键关联,得到所述目标修复源数据,将所述目标修复源数据插入所述复制端;
若所述检验结果为复制数据多余,向所述复制端发出删除指令,以便将多余复制数据删除。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于石化盈科信息技术有限责任公司,未经石化盈科信息技术有限责任公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010252727.4/1.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置