[发明专利]一种自定义监听数据库变化产生自定义消息结构的方法及控制装置有效
申请号: | 202010439860.0 | 申请日: | 2020-05-21 |
公开(公告)号: | CN111611227B | 公开(公告)日: | 2023-07-28 |
发明(设计)人: | 温凌敏;林晓华 | 申请(专利权)人: | 浩云科技股份有限公司 |
主分类号: | G06F16/21 | 分类号: | G06F16/21;G06F16/23;G06F16/27 |
代理公司: | 广州三环专利商标代理有限公司 44202 | 代理人: | 郭浩辉;麦小婵 |
地址: | 511400 广东省广州市番禺区东环*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 自定义 监听 数据库 变化 产生 消息 结构 方法 控制 装置 | ||
1.一种自定义监听数据库变化产生自定义消息结构的方法,其特征在于:包括以下步骤:
步骤1:配置阶段,包括过滤规则配置、输出结构模板配置、路由配置以及发布消息主题配置;
步骤2:从Mysql订阅binlog日志数据,解析binlog从而得到数据库的库名、表名及变更内容,步骤2中解析得到配置信息相关内容时将更新步骤1中的配置信息并根据新的配置信息进行重新配置;
步骤3:根据库表的过滤规则配置,过滤匹配操作类型,字段,以及字段条件值;
步骤4:将步骤3中过滤得到的数据配置到预设的输出结构模板中进行结构转换得到全新的数据结构;
步骤5:根据路由配置,可将步骤4中获取的数据结构的数据发布到消息队列的不同主题去。
2.如权利要求1所述的一种自定义监听数据库变化产生自定义消息结构的方法,其特征在于:更新配置过程动态编辑完毕后即时生效。
3.如权利要求1所述的一种自定义监听数据库变化产生自定义消息结构的方法,其特征在于:所述过滤规则配置具体方法为:配置白名单和黑名单,两者均包含:数据库、数据表、操作类型、字段名、字段条件及条件值;从binlog得到数据库变更时包含以上信息,根据白名单配置进行匹配,排除黑名单中的配置,从而得到一个过滤后的数据记录。
4.如权利要求3所述的一种自定义监听数据库变化产生自定义消息结构的方法,其特征在于:匹配内容包括匹配库、表、操作类型、字段条件。
5.如权利要求3或4所述的一种自定义监听数据库变化产生自定义消息结构的方法,其特征在于:每次黑名单和白名单配置完毕后进行校验,当发现黑名单和白名单内存在重复内容时进行标识警告,处理完警告信息后方能完成白名单和黑名单的配置。
6.如权利要求1所述的一种自定义监听数据库变化产生自定义消息结构的方法,其特征在于:步骤4中进行结构转化完成后加入时间标签。
7.一种控制装置,用于实现权利要求1-4任一所述的自定义监听数据库变化产生自定义消息结构的方法,其特征在于:至少包括存储器,所述存储器中存有监听配置模块、binlong解析模块以及数据过滤、解析、路由模块,所述存储器连接在数据库服务器上,并通过消息队列组件进行输出。
8.如权利要求7所述的控制装置,其特征在于:所述监听配置模块中执行过滤配置、输出结构模板配置以及发布消息主题配置。
9.如权利要求7所述的控制装置,其特征在于:还包括故障解析模块,故障解析模块自动存储多次发生的故障。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于浩云科技股份有限公司,未经浩云科技股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010439860.0/1.html,转载请声明来源钻瓜专利网。