[发明专利]一种多数据中心的数据同步方法

说明书

一种多数据中心的数据同步方法，包括如下步骤：步骤1：变更数据的获取：各应用系统以消息的方式向本系统数据中心的客户端发送数据变更请求，客户端接收到经序列化的请求后，对所接收的消息在当前数据中心内进行持久化；步骤2：变更数据的分发：根据当前业务事务严格性要求，当前数据中心选择处理或转发变更数据；步骤3：变更数据的同步执行：数据到达目的各自数据中心之后的同步执行操作；步骤4：变更发回到数据的执行情况汇总：将数据执行情况以消息的形式发回到数据产生的数据中心；步骤5：失败数据的定向重发；步骤6：多数据中心的同步数据运转监控与异常报警：变更数据被重新发送到目的数据中心后的处理。

技术领域

本发明涉及数据同步领域，特别涉及一种多数据中心的数据同步方法。

背景技术

为存储海量数据，各互联网公司在世界各地建立了庞大的数据中心，存储其全球用户每天产生的海量数据，单个数据中心的终端的主机数量在几百万至数万的数量级不等。对这些数据的管理和使用都是巨大的挑战：包括数据的读取和存储、索引和寻址、配置和管理的接口、数据中心之间的数据复制等。为保持这些数据的一致性，在不同地理位置的数据中心之间进行数据同步和复制成为越来越迫切的需求。

对于电子商务领域来说，以多数据中心部署的方式来提高访问速度，从而提高用户的体验，是一种通常的做法。但是跨公网网络，尤其是跨国际公网网络常常会出现一些不稳定情况，如网络丢包，网络中断等。常规做法是采用专线连接各个数据中心，但这种做法成本大，对于中小企业而言，投入产出比极低。

相比较而言，依靠软件方法，采用消息队列技术作为数据传输的载体，通过消息机制保证数据的及时性、准确性和可恢复性，这是一种比较实际和相对可靠做法。

CN 104539663A一种跨数据中心的数据同步方法和装置公开一种跨数据中心的数据同步方法和系统，具体包括：收集待同步数据中心的键值对数据；以及利用分布式计算框架进行所述待同步数据中心的键值对数据的一致性检测，得到一致或不一致的检测结果。本发明重点在于主、备数据中心之间的传输方法，并未过多涉及到多数据中心间的数据传输。

CN103763368A一种跨数据中心的数据同步方法公开一种跨数据库同步的方法，其具体实现过程为：完成数据的写入与日志的记录；同步调度与推送；日志回放，完成数据同步；进行跨数据中心的数据访问，实现异步数据同步操作。该发明能够实现跨数据中心的异步数据同步操作，提高数据的安全性；有效地利用数据中心内部的IO资源和数据中心之间的网络资源，但该方法主要通过日志回放的方式来实现，这与本发明通过传输少量数据，实时返回同步状态的做法存在很大不同；

CN 104572921A一种跨数据中心的数据同步方法和装置公布了一种跨数据中心的数据同步和装置，具体包括：收集待同步数据中心的键值对数据；以及利用分布式计算框架进行所述待同步数据中心的键值对数据的一致性检测，得到一致或不一致的检测结果。本发明通过减少对各数据中心的访问次数减轻对各数据中心的线上访问压力，其着重在对各分布式计算环境中的数据在各数据中心进行比较，并未提及将数据分发至各数据中心进行同步的方式。

发明内容

为解决现有技术存在的局限性，本发明目的是，提供一种跨数据中心的数据同步方法，目的是在复杂网络中完成数据传输，保证数据有序、且不被丢失。

本发明的技术方案是，一种多数据中心的数据同步方法，具体包括：

步骤1：变更数据的获取：各应用系统以消息的方式向本系统数据中心的客户端发送数据变更请求，客户端接收到经序列化的请求后，对所接收的消息在当前数据中心内进行持久化；

所述客户端，是部署在服务器端的应用，用于接收服务器端发出的数据，并按照业务需求执行数据同步操作；所述服务器端运行时，一方面用于获取应用系统需要在多数据中心同步执行的数据，一方面用于将数据分发给各个需数据同步的数据中心的客户端