[发明专利]一种增量准实时复制数据对比方法及装置

说明书

本申请提供了一种增量准实时复制数据对比方法及装置，通过利用Oracle的闪回查询，查询到源库复制表在某个时间点的历史时刻数据，然后和目标库数据进行对比，从而得到准确有效的数据对比结果，实现生产在不停机、甚至在业务高峰期时也可以进行准确有效的数据对比，降低了准确有效数据对比的门槛。生产可以在必要时随时发起数据对比，及时发现源库和目标库两侧的数据差异项，进行及时的补救措施，提升了生产的运维效率和发现数据偏差的能力以及纠正偏差数据的响应时效，降低应用进行数据校验的运维难度，同时也降低用户由于数据偏差带来的不良体验。

技术领域

本申请属于数据库复制技术领域，具体地讲，涉及一种增量准实时复制数据对比方法及装置。

背景技术

现有的Oracle数据准实时复制技术中，对于增量复制数据的数据对比通常是分别全量查询当前时间点(对比工具的启动时刻)的源数据库和目标库的表数据，然后通过数据校对算法进行数据对比。

当源数据库Oracle处于业务低峰期时，这种对比方法产生的结果才具有一定的参考价值(依然可能会存在少量偏差)，而在业务高峰期源数据库Oracle的数据更新速度极快时，由于准实时复制必然存在一定时间的延迟，目标库与源数据库在同一时刻的数据偏差可能非常大，这种对比方法产生的结果参考意义不大。

从生产现状来看，现有数据对比工具几乎只在停机数据迁移的场景中使用，因为这时没有增量数据，对比的结论是准确无偏差的。如果为了做数据对比而要求生产停机，风险和代价都比较大，所以生产上因数据复制造成的数据偏差通常是由业务感知发现，数据偏差发现的时间晚且容易给系统的用户造成不良体验。

发明内容

本申请提供了一种增量准实时复制数据对比方法及装置，以至少解决现有技术中数据对比工具几乎只在停机数据迁移的场景中使用，为了做数据对比而要求生产停机，风险和代价都比较大的问题。

根据本申请的一个方面，提供了一种增量准实时复制数据对比方法，包括：

断开正在进行的数据落库工作；

根据获取的scn号获得源库对应时刻历史表数据及目标库表数据；

将所述历史表数据与目标库表数据进行对比；

根据对比结果将所述复制表数据实时录入目标数据库中。

在一实施例中，断开正在进行的数据落库工作，包括：

在启动对比程序时断开数据落库工作；

记录回放断点和已经完成回放的源数据库最新scn号；

从目标数据库中查询对应的目标库表数据。

在一实施例中，增量准实时复制数据对比方法还包括：

在将复制表数据与目标库表数据输入对比算法之后，从回放断点处恢复数据落库工作。

在一实施例中，根据获取的scn号获得对应时刻的源数据库表的复制表数据，包括：

基于记录的scn号获得该scn号对应的时刻；

根据该scn号及对应的时刻获取该scn号对应时刻的源数据库表的复制表数据。

在一实施例中，将复制表数据与目标库表数据进行对比，包括：

将复制表数据与目标库表数据输入对比算法中；

根据复制表数据与目标库表数据通过预存的对比算法对两侧表数据进行数据校对。

在一实施例中，根据对比结果将复制表数据实时录入目标数据库中，包括：

根据对比结果确定增量数据并解析增量数据；