[发明专利]一种基于ROWID区间的初始化装载方法与装置有效
申请号: | 202110374780.6 | 申请日: | 2021-04-08 |
公开(公告)号: | CN113190281B | 公开(公告)日: | 2022-05-17 |
发明(设计)人: | 孙峰;谭建强;彭青松;刘启春;余院兰 | 申请(专利权)人: | 武汉达梦数据库股份有限公司 |
主分类号: | G06F9/445 | 分类号: | G06F9/445;G06F9/4401;G06F16/27 |
代理公司: | 深圳市六加知识产权代理有限公司 44372 | 代理人: | 向彬 |
地址: | 430000 湖北省武汉市东湖新技术开*** | 国省代码: | 湖北;42 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 基于 rowid 区间 初始化 装载 方法 装置 | ||
1.一种基于ROWID区间的初始化装载方法,其特征在于,包括:
源端按照ROWID从小到大的顺序查询待装载表中的数据,并提取结果集发送到目的端,直至结果集提取完成;
如果在提取结果集过程中报错“快照过旧”,则利用ROWID将本轮查询中已成功提取到结果集的行划分出一个ROWID区间,并将该ROWID区间对应的装载LSN保存到目的端;
开启数据同步后,目的端根据操作日志中的ROWID值定位所属的ROWID区间,并找到对应的装载LSN以实现数据同步的过滤;
所述如果在提取结果集过程中报错“快照过旧”,则利用ROWID将本轮查询中已成功提取到结果集的行划分出一个ROWID区间,并将该ROWID区间对应的装载LSN保存到目的端,具体为:
如果在提取结果集过程中报错“快照过旧”,则将本轮查询中已成功提取到结果集的最后一行数据的ROWID值作为本轮查询的终止ROWID,利用本轮查询的起始ROWID和终止ROWID划分出一个ROWID区间;
源端将所述待装载表的表ID以及本轮查询的装载LSN、起始ROWID和终止ROWID发送到目的端,由目的端保存到本地的同步表中,以便进行数据同步时使用;
如果在提取结果集过程中报错“快照过旧”,则根据本轮查询的终止ROWID确定下一轮查询的起始ROWID,对所述待装载表执行下一轮的数据查询,直至结果集提取完成;
开启数据同步后,所述目的端根据操作日志中的ROWID值定位所属的ROWID区间,并找到对应的装载LSN以实现数据同步的过滤,具体为:
源端捕获源端数据库的操作日志,对所述操作日志解析后将获得的操作信息发送到目的端执行同步;
目的端接收到源端发送来的操作信息后根据事务ID进行分类管理,当接收到提交操作时,找到提交操作对应的事务准备执行;
目的端依次执行该事务中的每个操作,使用操作对应的表ID和ROWID值在所述同步表中定位该操作所属的ROWID区间,得到对应的装载LSN;
对比该事务的提交LSN和装载LSN的大小,当提交LSN小于等于装载LSN时将该操作直接丢弃,否则执行入库,完成该操作的同步;
在提取结果集时,源端记录下本轮查询中已成功提取到结果集的第一行数据的ROWID值作为本轮查询的起始ROWID。
2.如权利要求1所述的基于ROWID区间的初始化装载方法,其特征在于,当源端数据库支持闪回查询功能时,所述源端按照ROWID从小到大的顺序查询待装载表中的数据,并提取结果集发送到目的端,具体为:
在源端查询当前事务的提交LSN,并将当前事务的提交LSN作为本轮查询的装载LSN;
源端按照ROWID从小到大的顺序,利用本轮查询的装载LSN以闪回方式逐行查询待装载表中的数据,并提取结果集发送到目的端。
3.如权利要求1所述的基于ROWID区间的初始化装载方法,其特征在于,所述同步表的表结构包括OBJID列、LSN列、START_ROWID列和END_ROWID列;
其中,所述OBJID列用于存放所述待装载表的表ID,所述LSN列用于存放对应ROWID区间的装载LSN,所述START_ROWID列用于存放对应ROWID区间的起始ROWID,所述END_ROWID列用于存放对应ROWID区间的终止ROWID。
4.如权利要求2所述的基于ROWID区间的初始化装载方法,其特征在于,如果在提取结果集过程中未报错“快照过旧”,则在结果集提取完成后,将NULL值作为本轮查询的终止ROWID,利用本轮查询的起始ROWID和终止ROWID划分出一个ROWID区间。
5.如权利要求1所述的基于ROWID区间的初始化装载方法,其特征在于,在源端对所述操作日志解析后,获得的所述操作信息包括该操作对应的事务ID、表ID、操作类型和操作数据,且所述操作数据中包含该数据在源表上的ROWID值。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于武汉达梦数据库股份有限公司,未经武汉达梦数据库股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110374780.6/1.html,转载请声明来源钻瓜专利网。