[发明专利]一种减少主备节点故障切换过程中数据丢失的方法和装置

说明书

技术领域

本发明涉及数据库领域，尤其涉及一种减少主备节点故障切换过程中数据丢失的方法和装置。

背景技术

mysql主节点和备用节点之间的数据增量复制常用异步复制，在主节点故障时，备用节点可以继续提供服务，这是很常用的一种提高数据库的可用性的方式。但是由于数据复制的过程是异步的，当主节点故障时，总存在一部分数据没能传送到备用节点上。主节点故障而备用节点接替主节点提供数据服务的那段时间中，如果数据修改涉到了那部分没传过来的数据中的某一部分，那么在故障解决后，主节点重新提供服务时，就会产生数据冲突。目前常用的处理冲突方法是在故障恢复时，修改主节点数据，让主节点的数据全部与备用节点保持一致。这样做的一个重大缺点是，那部分主节点故障发生时没有同步到备用节点上，且在备用节点提供服务过程中没有涉及的那部分数据变更会丢失。

另外一种方案是mysql主节点和备用节点之间的数据增量复制采用同步复制，即主节点的每次数据变更都必须在备用节点上都变更成功才能算成功，这样的确能规避数据冲突的问题。但这样做的缺点在：

a每次数据更新的时间变得更长了，降低了写入性能。

b如果主节点和备用节点之间的网络中断，那么主节点的数据变更就都会失败。如果主节点和备用节点之间的网络延迟增大，那么每次数据更新的时间也会延长。整个数据库系统的可用性严重依赖于主节点和备用节点之间的网络状况，系统稳定性下降。

发明内容

本发明提供了一种减少主备节点故障切换过程中数据丢失的方法和装置，其通过mysql数据库的主节点和备用节点互相获取对方在本方未记录的数据并对数据进行复制和应用，将数据中不一致的内容进行同步，实现了主节点和备用节点之间的数据的完整对应，并减少了故障发生和恢复过程中数据的丢失。

为实现上述设计，本发明采用以下技术方案：

一方面采用一种减少主备节点故障切换过程中数据丢失的方法，包括：

主节点从备用节点获取所述主节点的故障发生后备用节点产生的数据进行复制并应用；

所述备用节点从主节点获取所述主节点发生故障时未从主节点备份的数据进行复制并应用；

比对所述主节点的数据库中与所述备用节点的数据库识别出不一致的数据，将所述不一致的数据替换为所述备用节点的数据库中的数据；

其中，所述主节点为mysql主节点，所述备用节点为mysql备用节点。

其中，所述主节点从备用节点获取所述主节点的故障发生后备用节点产生的数据进行复制并应用之前，还包括：

预设所述主节点和备用节点之间的数据进行复制时忽略数据冲突错误。

其中，所述主节点从备用节点获取所述主节点的故障发生后备用节点产生的数据进行复制并应用，具体为：

主节点从备用节点的binlog中读取故障发生的时间点，将所述时间点之后备用节点产生的数据进行复制并应用。

其中，所述比对所述主节点的数据库中与所述备用节点的数据库识别出不一致的数据，将所述不一致的数据替换为所述备用节点的数据库中的数据，具体为：

主节点启用比对数据库的工具脚本识别出与所述备用节点的数据库中不一致的数据，将所述不一致的数据替换为所述备用节点的数据库中的数据。

其中，所述比对所述主节点的数据库中与所述备用节点的数据库识别出不一致的数据，将所述不一致的数据替换为所述备用节点的数据库中的数据之后，还包括：

恢复所述主节点的数据服务，停止备用节点的数据服务。

另一方面采用一种减少主备节点故障切换过程中数据丢失的装置，包括：

第一复制单元，用于主节点从备用节点获取所述主节点的故障发生后备用节点产生的数据进行复制并应用；

第二复制单元，用于所述备用节点从主节点获取所述主节点发生故障时未从主节点备份的数据进行复制并应用；

比对替换单元，用于比对所述主节点的数据库中与所述备用节点的数据库识别出不一致的数据，将所述不一致的数据替换为所述备用节点的数据库中的数据；

其中，所述主节点为mysql主节点，所述备用节点为mysql备用节点。

其中，还包括：

预设单元，用于预设所述主节点和备用节点之间的数据进行复制时忽略数据冲突错误。

其中，所述第一复制单元，具体用于：

主节点从备用节点的binlog中读取故障发生的时间点，将所述时间点之后备用节点产生的数据进行复制并应用。

其中，所述比对替换单元，具体用于：