[发明专利]一种数据对账方法、装置和系统有效
申请号: | 201410834649.3 | 申请日: | 2014-12-26 |
公开(公告)号: | CN104462568B | 公开(公告)日: | 2018-07-31 |
发明(设计)人: | 孙玉祥;高隆林;车帅;聂秀志;李光明 | 申请(专利权)人: | 山东中创软件商用中间件股份有限公司 |
主分类号: | G06F17/30 | 分类号: | G06F17/30;G06F11/14 |
代理公司: | 北京集佳知识产权代理有限公司 11227 | 代理人: | 罗满 |
地址: | 250014 山东省*** | 国省代码: | 山东;37 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 数据 方法 装置 系统 | ||
本发明实施例提供一种数据对账方法、装置和系统,其中,方法包括:确定当前基准时间、当前对账时间和需对账的数据表;获取在当前基准时间和当前对账时间之间写入源数据库所述数据表内的源快照表,和写入目的数据库所述数据表内的目的快照表;判断所述目的快照表与所述源快照表是否一致,若一致,则将当前对账时间作为下一基准时间;若不一致,根据缺失数据向目的端重传数据,目的端将重传数据写入目的数据库中,直至数据重传后获取的目的快照表和源快照表一致,将当前对账时间作为下一基准时间。每次对账时仅仅将源端的增量数据和目的端的增量数据进行比对,减少了每次对账需处理的业务数据,减少了对账的消耗时间,提高了对账效率。
技术领域
本发明涉及数据处理技术领域,特别是涉及一种数据对账方法、装置和系统。
背景技术
数据交换中间件SIB是构建可管理的数据交换系统的骨干软件设施,它能够快速搭建分布式应用系统间的数据交换总线通道,可以实现分布的、异构数据源之间的数据同步。SIB产品在源数据库中具有创建触发器和临时表的权限,触发器捕获变动的数据到源快照表中,在执行抽取时,程序自动从源快照表中读取数据,然后将数据装载到目的数据库中,从而实现SIB产品数据的传输。
然而,在数据实时同步的场景下,尤其是跨网络数据传输过程中,由于交换网络不稳定、硬件服务器异常、消息积压等异常情况,容易造成SIB交换数据丢失,从而导致源端和目的端数据不一致,因此,需要对SIB进行数据对账,但是,现有技术中,通常针对业务表全表对比来进行数据对账,针对业务表全表对比来进行数据对账,业务数据量非常大,对账耗时长,且对账效率较低。
发明内容
有鉴于此,本发明实施例提供一种数据对账方法、装置和系统,以解决现有技术中针对业务表全表对比来进行数据对账,业务数据量非常大,对账耗时长,且对账效率较低的问题。
为实现上述目的,本发明实施例提供如下技术方案:
一种数据对账方法,包括:
确定当前基准时间、当前对账时间和需对账的数据表;
获取在当前基准时间和当前对账时间之间写入源数据库所述数据表内的源快照表,和在当前基准时间和当前对账时间之间写入目的数据库所述数据表内的目的快照表;
判断所述目的快照表与所述源快照表是否一致,
若一致,则将当前对账时间作为下一基准时间;
若不一致,则说明所述目的快照表内数据缺失,确定目的快照表内缺失数据,根据所述缺失数据向目的端重传数据,控制目的端将重传数据写入目的数据库中,直至数据重传后获取的目的快照表和源快照表一致,将当前对账时间作为下一基准时间。
其中,获取在当前基准时间和当前对账时间之间写入目的数据库所述数据表内的目的快照表包括:
向目的端发送需对账数据表的数据表名称;
目的端接收所述数据表名称,确定当前基准时间和当前对账时间后,将在所述当前基准时间和当前对账时间之间写入目的数据库所述数据表名称对应的数据表内的目的快照表发送给源端;
获取目的端根据所述数据表发送来的目的快照表,得到在当前基准时间和当前对账时间之间写入目的数据库所述数据表内的目的快照表。
其中,所述判断所述目的快照表与所述源快照表是否一致包括:
判断目的快照表的数量是否与源快照表的数量一致;
判断每个目的快照表内业务数据是否与其相对的源快照表内业务数据均一致;
若均是,则判定所述目的快照表与所述源快照表一致,反之,则判定所述目的快照表与所述源快照表不一致。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于山东中创软件商用中间件股份有限公司,未经山东中创软件商用中间件股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201410834649.3/2.html,转载请声明来源钻瓜专利网。
- 上一篇:一种数据存储方法及装置
- 下一篇:网页正文提取的方法和装置
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置