[发明专利]一种关系数据库前映像的附加日志解析方法有效

专利信息
申请号: 201710622151.4 申请日: 2017-07-27
公开(公告)号: CN107436938B 公开(公告)日: 2019-11-05
发明(设计)人: 聂庆节;杨华飞;刘嘉华;刘军;刘赛;周忠冉;张磊;马悦皎;缪骞云;周建华;崔林 申请(专利权)人: 国家电网公司;南京南瑞集团公司;南京南瑞信息通信科技有限公司;国网江苏省电力公司电力科学研究院
主分类号: G06F16/27 分类号: G06F16/27;G06F16/28
代理公司: 南京纵横知识产权代理有限公司 32224 代理人: 董建林
地址: 211100 江*** 国省代码: 江苏;32
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 一种 关系 数据库 映像 附加 日志 解析 方法
【说明书】:

发明公开一种关系数据库前映像的附加日志解析方法:(1)获取数据库版本信息、解析前映像的change第四块中的KDO数据,提取其中的操作码;(2)根据不同的操作码采用不同的解析方式,获取附加日志数据块编号;(3)根据附加日志结构,获取附加日志内部的主键列数据;(4)将获取的主键列数据依次添加到改变列数据中。本发明可以依据主键精确定位变化数据的行号,同时不会影响数据库自身性能。

技术领域

本发明涉及一种关系数据库前映像的附加日志解析方法,属于数据库数据复制技术领域。

背景技术

随着信息技术的深入发展,应用系统的不断升级,系统之间的集成贯通越来越多的需要数据交互,数据抽取已经逐步成为了信息系统融合的关键部分。然而,所有针对数据的抽取与交互都包含着一个基本的假设——数据的可用性和可靠性。数据库附件日志解析技术作为确定数据变化的关键,其数据的可用性和与可靠性自然备受关注。数据库前映像附件日志解析技术正是在这种要求下产生的。

国内外关系型数据库日志挖掘技术分为两种类型,一种是基于逻辑级日志抽取技术、一种是基于物理级Redo抽取技术。数据库日志抽取技术在信息系统集成交互领域应用广泛,主要使用的是基于逻辑级日志抽取技术,该抽取技术的前提需要快速实现对附加日志的解析确定变化行的主键信息,传统的附加日志解析方法多数采用数据库自带插件实现,会对数据库自身性能产生影响,不能较好的解决数据库日志抽取效率问题,并且对生产库影响较大。

发明内容

本发明的目的是克服现有技术中的不足,提供一种关系数据库前映像的附加日志解析方法,解决现有技术中附加日志解析方法采用自带插件实现,对数据库自身存在影响,数据库日志抽取效率低的技术问题。

为解决上述技术问题,本发明所采用的技术方案是:一种关系数据库前映像的附加日志解析方法,包括以下步骤:

(1)获取数据库版本信息,根据KDO公共结构解析change第四块中的KDO数据,提取其中的操作码;

(2)针对不同的操作码采用不同的解析方式,获取附加日志数据块编号;

(3)根据附加日志结构,获取附加日志内部的主键列数据;

(4)将获取的主键列数据依次添加到改变列数据列表中。

步骤(1)中change第四块中的KDO数据结构如下:

标识Bdba所占字节区间为[0,3];

标识hdba所占字节区间为[4,7];

标识Maxfr所占字节区间为[8,9];

标识opcode所占字节区间为第10字节;

标识Xtype所占字节区间为第11个字节;

标识itli所占字节区间为第12字节;

标识Ispac所占字节区间为第13字节。

步骤(2)中针对不同的操作码采用不同的解析方式,具体如下:

如果操作码为OP_ROW_INSERT,则根据OP_ROW_INSERT后续的KDO结构解析change第4块中余下KDO数据,从第5块开始根据改变列数量读取各列的值,判断opUndoSec.OpMajor==0x05&&opUndoSec.OpMinor==0x01是否为真,如果为真,则附加日志开始change数据块编号index=6+opKdo.cc,否则附加日志开始change数据块编号index=5+opKdo.cc;

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于国家电网公司;南京南瑞集团公司;南京南瑞信息通信科技有限公司;国网江苏省电力公司电力科学研究院,未经国家电网公司;南京南瑞集团公司;南京南瑞信息通信科技有限公司;国网江苏省电力公司电力科学研究院许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/201710622151.4/2.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top