[发明专利]一种数据备份方法和装置

说明书

本发明公开了一种数据备份方法和装置，方法包括：从数据库读取以第一格式记录的数据更新变更，并将数据更新变更解析为第二格式；通过消息队列客户端将第二格式的数据更新变更发送到与消息队列客户端相对应的第一消息队列；由第一消息队列将第二格式的数据更新变更推送给订阅第一消息队列的分布式备份端；在分布式备份端对第二格式的数据更新变更执行订阅转换以生成备份文件；响应于接收到还原指令而在分布式备份端基于备份文件来还原数据文件。本发明能够实时监控数据库的备份还原，提升数据库的应对性能。

技术领域

本发明涉及数据安全领域，更具体地，特别是指一种数据备份方法和 装置。

背景技术

数据对应应用系统来说是非常中的，为了确保数据的安全，需要对数 据库的数据进行备份。MySQL数据库也提供了多种方式的数据备份，每种 备份存在一定的缺陷，需要从主服务器备份到对应的从服务器上，对主服 务的压力是很大的，对主服务器的性能影响很大。现有技术有的通过数据 文件进行备份，这种方式对于InnoDB类型的表备份不起作用；有的使用副 本进行备份，这种方式如果副本出现问题将对备份有影响。另外，对于备 份过程出现的备份异常，上述方法均不能及时了解，导致备份数据出现问 题。

针对现有技术中无法监控和及时处理备份和还原过程的问题，目前尚 无有效的解决方案。

发明内容

有鉴于此，本发明实施例的目的在于提出一种数据备份方法和装置， 能够实时监控数据库的备份还原，提升数据库的应对性能。

基于上述目的，本发明实施例的第一方面提供了一种数据备份方法， 包括周期性地执行以下步骤：

从数据库读取以第一格式记录的数据更新变更，并将数据更新变更解 析为第二格式；

通过消息队列客户端将第二格式的数据更新变更发送到与消息队列客 户端相对应的第一消息队列；

由第一消息队列将第二格式的数据更新变更推送给订阅第一消息队列 的分布式备份端；

在分布式备份端对第二格式的数据更新变更执行订阅转换以生成备份 文件；

响应于接收到还原指令而在分布式备份端基于备份文件来还原数据文 件。

在一些实施方式中，从数据库读取以第一格式记录的数据更新变更包 括：

使数据库启用操作日志记录功能，并为操作日志记录功能确定数据日 志位置；

由操作日志记录功能基于数据库中的数据更新而生成数据日志，并基 于数据日志向数据日志位置写入数据更新变更；

访问数据日志位置以获取以第一格式记录的数据更新变更。

在一些实施方式中，第一格式为记录数据日志使用的二进制格式；第 二格式为JSON格式。

在一些实施方式中，通过消息队列客户端将第二格式的数据更新变更 发送到第一消息队列包括：

由消息队列客户端基于第一消息队列的最大消息长度将第二格式的数 据更新变更划分为多个分片；

将多个分片按顺序依次发送到第一消息队列。

在一些实施方式中，由第一消息队列将第二格式的数据更新变更推送 给订阅第一消息队列的分布式备份端包括：

在第一消息队列上创建第一主题并为第一主题设置唯一队列；

在第一主题的唯一队列上将多个分片按顺序依次发送到分布式备份端。

在一些实施方式中，分布式备份端配置为订阅多个不同的第一消息队 列，并且生成多个不同的备份文件，其中多个不同的第一消息队列分别一 一对应于多个不同的消息队列客户端。