[发明专利]一种数据库实时同步系统数据一致性的检测方法及系统

说明书

本发明公开了一种数据库实时同步系统数据一致性的检测方法及系统，在源端和目的端分别部署有一个源端数据代理和目的端数据代理，具体为：源端数据代理对源数据库表进行锁表操作，获取源端数据库表的操作序列号，将操作序列号发送给数据库同步系统；数据库同步系统执行数据同步到所述操作序列号并暂停；源端数据代理在源数据库表中查询所述操作序列号对应的数据，目的端数据代理在目的数据库表中查询所述操作序列号对应的数据；对比工具对源端数据代理和目的端数据代理查询到的数据进行对比，生成一致性对比报告。本发明在保证应用系统业务连续性的同时，提高同步数据一致性的检测效率，确保数据库同步系统的正确运行。

技术领域

本发明涉及数据库数据同步领域，具体涉及一种数据库实时同步系统数据一致性的检测方法及系统，用于判定同步复制过程中，源端数据和目的端数据的一致性，从而确定当前数据库同步系统工作的有效性。

背景技术

随着信息化建设的高速发展，信息系统已经成为企业维持业务运转的关键，企业迫切需要提高信息系统的可用性，保证业务的连续性，最大限度地减少因灾难或故障所带来的损失。另一方面，多样化的业务类型导致数据访问需求的日趋复杂化，数据量的急剧攀升也导致数据库服务器不堪重负，企业同样迫切需要提高信息系统的运行效率。

数据库实时同步系统基于成熟的关系数据模型和标准接口，能以极少的系统开支实现秒级数据实时同步，可广泛应用于应急系统、容灾备份、负载均衡、数据移植、联机维护、多业务中心等业务领域。

目前数据同步一致性检测的方法可以简单分为离线检测和在线检测两大类。

前者技术思路较为简单，即在实施数据一致性检测前，停止业务系统的工作，通过比较静止状态下的源端和目的端数据的一致性从而判定同步系统工作的有效性。这种检测方案以牺牲业务系统连续性为代价，因此对于业务连续性要求较高的数据同步系统实用性不高，往往只是作为补充技术手段。

在线检测则较为复杂，表现在两个方面。一是业务系统工作的连续性使得源端数据可能总是处于变化中，需要确定比对的基准点以及相应的比对数据。二是数据同步的过程中，源端和目的端数据库之间存在一个称之为同步窗口的同步时间间隔，在这个窗口期间源库与目的库数据可能会存在不一致的情况。

公开号“CN103927313A”、名称为“企业信息系统数据同步核查机制”的专利文献公开了一种自动核查系统，通过对原始记录进行标记来实施数据同步以及比对核定数据同步的信息一致性。该方法破坏了原始数据的固有结构，对应用系统的插入、更新操作提出了额外的工作要求。

公开号“CN200710000456、名称为“一种验证数据同步的方法及系统”的专利文献公开的验证方法事先确定了待验证的同步数据，并且侧重于论述待验证同步数据的比对方法，因此可以归结为前述的离线检测方法，并不适合于数据库实时数据同步的在线检测。

发明内容

为了克服现有数据库同步系统中现有数据一致性检测技术的缺陷，本发明提供一种基于同步数据一致性在线检测方法及系统，其目的在于，在保证应用系统业务连续性的同时，提高同步数据一致性的检测效率，确保数据库同步系统的正确运行。

一种数据库实时同步系统数据一致性的检测方法，在源端和目的端分别部署有一个源端数据代理和目的端数据代理，该方法具体为：

源端数据代理对源数据库表进行锁表操作，获取源端数据库表的操作序列号，将操作序列号发送给数据库同步系统；

数据库同步系统执行数据同步到所述操作序列号并暂停；

源端数据代理在源数据库表中查询所述操作序列号对应的数据，目的端数据代理在目的数据库表中查询所述操作序列号对应的数据；

对比工具对源端数据代理和目的端数据代理查询到的数据进行对比，生成一致性对比报告。