[发明专利]同步数据的方法及系统

说明书

技术领域

本发明涉及网络技术领域，特别涉及一种同步数据的方法及系统。

背景技术

在多机房、多机器、多进程部署的分布式系统内，可能会对多个业务进程访问的数据进行频繁读写操作处理。同时，为了保证每个机房均可以向业务进程提供服务，需要对每个机房中存储的数据进行同步处理。

目前，同步数据的过程具体可以为：终端向主redis服务器发送写数据请求，该写数据请求中携带待写入数据和数据标识，主redis服务器位于该多个机房中的任一机房。当主redis服务器接收到该写数据请求时，根据该数据标识，对待写入数据执行写操作。此外，该主redis服务器还可以向从redis服务器发送同步数据请求，该同步数据请求中携带待写入数据和该数据标识，且该从redis服务器位于其他机房中，从而同步多个机房中存储的数据。

通过上述方法同步数据时，由于redis服务器同步数据时是单方向的，即，一旦确定主redis服务器和从redis服务器之后，只能将主redis服务器中的数据同步到从redis服务器中，无法将从redis服务器中的数据同步到主redis服务器中；并且，上述方法中每个机房中只包括一个redis服务器，限制了分布式系统的处理性能和可用性。

发明内容

为了解决现有技术的问题，本发明实施例提供了一种同步数据的方法及系统。所述技术方案如下：

第一方面，提供了一种同步数据的方法，所述方法应用于分布式系统中，所述分布式系统包括多个机房，且每个机房中包括代理服务器集群、存储服务器集群和队列服务器集群，所述方法包括：

代理服务器集群接收终端发送的第一写数据请求，所述第一写数据请求中携带第一待写入数据和第一数据标识，所述代理服务器集群位于第一机房中，且所述第一机房为所述多个机房中的任一机房；

所述代理服务器集群对所述第一数据标识进行哈希运算，得到所述第一待写入数据对应的第一存储服务器的编号，所述第一存储服务器包含于存储服务器集群中，所述存储服务器集群也位于所述第一机房中；

所述代理服务器集群根据所述第一存储服务器的编号，将所述第一写数据请求发送给所述第一存储服务器，使所述第一存储服务器根据所述第一数据标识，写入所述第一待写入数据；

所述代理服务器集群向队列服务器集群发送第一同步数据请求，所述第一同步数据请求中携带所述第一待写入数据和所述第一数据标识，所述队列服务器集群也位于所述第一机房中；

当所述队列服务器集群接收到所述第一同步数据请求时，所述队列服务器集群将所述第一同步数据请求发送给第二机房包括的队列服务器集群，以同步所述多个机房的存储服务器集群中存储的数据，所述第二机房为所述多个机房中除所述第一机房之外的机房。

可选地，所述代理服务器集群对所述第一数据标识进行哈希运算，得到所述第一待写入数据对应的第一存储服务器的编号之后，还包括：

所述代理服务器集群根据所述第一存储服务器的编号、所述第一待写入数据和所述第一数据标识，从所述第一存储服务器中获取所述第一待写入数据的元数据；

所述代理服务器集群根据所述元数据，判断是否执行对应的写操作；

如果判断出执行所述写操作，则所述代理服务器集群执行根据所述第一存储服务器的编号，将所述第一写数据请求发送给所述第一存储服务器的步骤。

可选地，所述代理服务器集群根据所述第一存储服务器的编号、所述第一待写入数据和所述第一数据标识，从所述第一存储服务器中获取所述第一待写入数据的元数据，包括：

所述代理服务器集群获取所述第一待写入数据的数据类型；

如果所述第一待写入数据的数据类型为第一数据类型，则所述代理服务器集群根据所述第一存储服务器的编号和所述第一数据标识，从所述第一存储服务器中获取所述第一待写入数据的元数据；

如果所述第一待写入数据的数据类型为第二数据类型，则所述代理服务器集群将所述第一待写入数据拆分为多个待写入子数据，并基于所述多个待写入子数据，将所述第一数据标识拆分为多个数据子标识，所述待写入子数据与所述数据子标识一一对应；

所述代理服务器集群根据所述第一存储服务器的编号和所述多个数据子标识，从所述第一存储服务器中获取所述多个待写入子数据的元数据。

可选地，所述代理服务器集群根据所述第一存储服务器的编号和所述第一数据标识，从所述第一存储服务器中获取所述第一待写入数据的元数据，包括：