[发明专利]数据库同步方法、装置及可读介质有效
申请号: | 201711423805.7 | 申请日: | 2017-12-25 |
公开(公告)号: | CN108170768B | 公开(公告)日: | 2023-03-24 |
发明(设计)人: | 祝百万 | 申请(专利权)人: | 腾讯科技(深圳)有限公司 |
主分类号: | G06F16/27 | 分类号: | G06F16/27;G06F11/34 |
代理公司: | 北京三高永信知识产权代理有限责任公司 11138 | 代理人: | 刘映东 |
地址: | 518057 广东省深圳*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本申请公开了一种数据库同步方法、装置及可读介质,涉及数据库领域。该方法包括:获取数据库事务;根据数据库事务生成二进制日志数据;将二进制日志数据写入临时内存文件系统,临时内存文件系统是通过写内存的方式进行写入的文件系统;将存储在临时内存文件系统中的二进制日志数据同步至备机,备机用于根据二进制日志数据对数据库进行同步。通过将二进制日志数据以写内存的方式写入临时内存文件系统,避免了由于二进制日志文件的文件写入速度较慢,主机将二进制日志数据写入二进制日志文件的效率比较低的问题,提高了二进制日志数据的写入效率。 | ||
搜索关键词: | 数据库 同步 方法 装置 可读 介质 | ||
获取数据库事务;
根据所述数据库事务生成二进制日志数据;
将所述二进制日志数据写入临时内存文件系统,所述临时内存文件系统是通过写内存的方式进行写入的文件系统;
将存储在所述临时内存文件系统中的所述二进制日志数据同步至备机,所述备机用于根据所述二进制日志数据对所述数据库进行同步。
2.根据权利要求1所述的方法,其特征在于,所述获取数据库事务,包括:接收数据库引擎发送的数据库事务,所述数据库事务是所述数据库引擎按照预先配置的本地二进制服务器地址发送的。
3.根据权利要求1所述的方法,其特征在于,所述将所述二进制日志数据写入临时内存文件系统,还包括:读取数据库配置参数,所述数据库配置参数包括:文件命名方式、文件切割方式、文件循环写入方式以及二进制日志数据的格式中的至少一种;
根据所述数据库配置参数,将所述二进制日志数据写入临时内存文件系统。
4.根据权利要求1至3任一所述的方法,其特征在于,所述将所述二进制日志数据写入临时内存文件系统之后,还包括:将所述临时内存文件系统中的所述二进制日志数据通过异步消息发送至冷备系统,所述冷备系统用于每隔预设时长对数据库和所述二进制日志数据进行冷备份。
5.根据权利要求4所述的方法,其特征在于,所述方法,还包括:接收所述备机发送的异常信号,所述异常信号是所述备机在同步到的所述二进制日志数据的事务标识不连续时产生的,所述异常信号包括所述备机缺失的二进制日志数据的事务标识;
根据所述异常信号中的事务标识,从所述冷备系统获取所述备机缺失的二进制日志数据;
将所述备机缺失的二进制日志数据发送至所述备机。
6.根据权利要求4所述的方法,其特征在于,所述方法,还包括:接收所述备机发送的异常信号,所述异常信号是所述备机在同步到的所述二进制日志数据的事务标识不连续时产生的,所述异常信号包括所述备机缺失的二进制日志数据的事务标识;
当所述冷备系统中没有所述备机缺失的二进制日志数据时,获取重做日志文件中与所述异常信号中的事务标识对应的重做日志数据;
将所述重做日志数据发送至所述备机。
7.一种数据库同步装置,其特征在于,所述装置包括:获取模块,用于获取数据库事务;
生成模块,用于根据所述数据库事务生成二进制日志数据;
写入模块,用于将所述二进制日志数据写入临时内存文件系统,所述临时内存文件系统是通过写内存的方式进行写入的文件系统;
同步模块,用于将存储在所述临时内存文件系统中的所述二进制日志数据同步至备机,所述备机用于根据所述二进制日志数据对所述数据库进行同步。
8.根据权利要求7所述的装置,其特征在于,所述获取模块,还用于接收数据库引擎发送的数据库事务,所述数据库事务是所述数据库引擎按照预先配置的本地二进制服务器地址发送的。9.根据权利要求7所述的装置,其特征在于,所述写入模块,还包括:读取单元,用于读取数据库配置参数,所述数据库配置参数包括:文件命名方式、文件切割方式、文件循环写入方式以及二进制日志数据的格式中的至少一种;
写入单元,用于根据所述数据库配置参数,将所述二进制日志数据写入临时内存文件系统。
10.根据权利要求7至9任一所述的装置,其特征在于,所述装置,还包括:发送模块,用于将所述临时内存文件系统中的所述二进制日志数据通过异步消息发送至冷备系统,所述冷备系统用于每隔预设时长对数据库和所述二进制日志数据进行冷备份。
11.根据权利要求10所述的装置,其特征在于,所述装置,还包括:第一接收模块,用于接收所述备机发送的异常信号,所述异常信号是所述备机在同步到的所述二进制日志数据的事务标识不连续时产生的,所述异常信号包括所述备机缺失的二进制日志数据的事务标识;
所述获取模块,还用于根据所述异常信号中的事务标识,从所述冷备系统获取所述备机缺失的二进制日志数据;
所述发送模块,还用于将所述备机缺失的二进制日志数据发送至所述备机。
12.根据权利要求10所述的装置,其特征在于,所述装置,还包括:第二接收模块,用于接收所述备机发送的异常信号,所述异常信号是所述备机在同步到的所述二进制日志数据的事务标识不连续时产生的,所述异常信号包括所述备机缺失的二进制日志数据的事务标识;
所述获取模块,还用于当所述冷备系统中没有所述备机缺失的二进制日志数据时,获取重做日志文件中与所述异常信号中的事务标识对应的重做日志数据;
所述发送模块,还用于将所述重做日志数据发送至所述备机。
13.一种计算机设备,其特征在于,所述计算机设备包括处理器和存储器,所述存储器中存储有至少一条指令、至少一段程序、代码集或指令集,所述至少一条指令、所述至少一段程序、所述代码集或指令集由所述处理器加载并执行以实现如权利要求1至6任一所述的数据库同步方法。14.一种计算机可读存储介质,其特征在于,所述存储介质中存储有至少一条指令、至少一段程序、代码集或指令集,所述至少一条指令、所述至少一段程序、所述代码集或指令集由所述处理器加载并执行以实现如权利要求1至6任一所述的数据库同步方法。该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于腾讯科技(深圳)有限公司,未经腾讯科技(深圳)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201711423805.7/,转载请声明来源钻瓜专利网。
- 上一篇:智能手机数据整理方法
- 下一篇:一种基于决策树算法的装配制造质量数据处理方法