[发明专利]数据库日志的处理方法、装置以及电子设备、存储介质在审
申请号: | 202011222718.7 | 申请日: | 2020-11-05 |
公开(公告)号: | CN112632017A | 公开(公告)日: | 2021-04-09 |
发明(设计)人: | 朱展;黄国平;朱道坤 | 申请(专利权)人: | 北京乐学帮网络技术有限公司 |
主分类号: | G06F16/18 | 分类号: | G06F16/18;G06F16/21 |
代理公司: | 北京清亦华知识产权代理事务所(普通合伙) 11201 | 代理人: | 孙立波 |
地址: | 100094 北京市海淀区*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 数据库 日志 处理 方法 装置 以及 电子设备 存储 介质 | ||
1.一种数据库日志的处理方法,其特征在于,包括:
获取各数据库中每个数据库的binlog日志;
根据预设的转换协议对每个所述binlog日志中的日志事件进行序列化转换,得到对应于每个所述binlog日志的目标格式数据;
将每个所述binlog日志的目标格式数据写入预设的数据模型,以便通过所述数据模型实现对各数据库的统一监听。
2.根据权利要求1所述的数据库日志的处理方法,其特征在于,获取各数据库中每个数据库的binlog日志,包括:同步各数据库中每个数据库的binlog日志。
3.根据权利要求1所述的数据库日志的处理方法,其特征在于,根据预设的转换协议对每个所述binlog日志中的日志事件进行序列化转换,包括:
根据Protobuf格式转换协议、Thrift格式转换协议或Kyro格式转换协议中的至少一种,将每个所述binlog日志中的日志事件进行序列化转换。
4.根据权利要求1-3任一项所述的数据库日志的处理方法,其特征在于,所述数据模型包括多个数据对象,其中,将每个所述binlog日志的目标格式数据写入预设的数据模型,包括:
获取每个所述binlog日志的目标格式数据与所述数据模型的各数据对象之间的对应关系;
根据所述对应关系,将每个所述binlog日志的目标格式数据写入所述数据模型中对应的数据对象。
5.根据权利要求1所述的数据库日志的处理方法,其特征在于,所述数据模型为根据各数据库的概念抽象得到,所述概念至少包括事务处理、新增、删除、修改和查询操作。
6.根据权利要求1所述的数据库日志的处理方法,其特征在于,在将每个所述binlog日志的目标格式数据写入预设的数据模型之后,还包括:将所述数据模型分发给业务处理方。
7.根据权利要求1所述的数据库日志的处理方法,其特征在于,在将每个所述binlog日志的目标格式数据写入预设的数据模型之前,还包括:
将每个所述binlog日志的目标格式数据写入消息队列;
所述将每个所述binlog日志的目标格式数据写入预设的数据模型,包括:
从所述消息队列中异步获取每个所述binlog日志的目标格式数据对应的消息;
将从所述消息队列中获取的消息写入所述数据模型。
8.一种数据库日志的处理装置,其特征在于,包括:
获取模块,用于获取各数据库中每个数据库的binlog日志;
序列化转换模块,用于根据预设的转换协议对每个所述binlog日志中的日志事件进行序列化转换,得到对应于每个所述binlog日志的目标格式数据;
对象生成模块,用于将每个所述binlog日志的目标格式数据写入预设的数据模型,以便通过所述数据模型实现对各数据库的统一监听。
9.一种电子设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,其特征在于,所述处理器执行所述计算机程序时实现根据权利要求1至7任一所述的数据库日志的处理方法。
10.一种非暂态计算机可读存储介质,其上存储有计算机程序,其特征在于,该计算机程序被处理器执行时实现根据权利要求1至7任一所述的数据库日志的处理方法。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京乐学帮网络技术有限公司,未经北京乐学帮网络技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202011222718.7/1.html,转载请声明来源钻瓜专利网。