[发明专利]一种分布式数据存储设备处理数据的方法及装置

说明书

本发明请求本申请人于2013年5月2日向中国国家知识产权局提交的申请号为201310158198.1，发明名称为“云同步数据处理系统及方法”的中国发明专利申请的优先权，上述申请的全部内容以引用方式并入本文。 

技术领域

本发明涉及数据同步领域，更具体的说，涉及一种分布式数据存储设备处理数据的方法及装置。

背景技术

随着因特网的发展进入到网络时代，用户相关数据保存的重要性也越来越重要。大多数情况下，用户的相关数据，如播放记录、个人收藏等会保存在本地客户端或服务器中。用户相关数据保存在客户端有利于用户对数据的获取，速度快。但是这些数据保存在客户端容易丢失，并且占用客户端的磁盘空间。若用户相关数据保存在服务器，那么用户每次获取这些数据的时候，都要通过客户端请求服务器，再由服务器进行相关的查询，并将结果返回到客户端，这样就造成客户端获取数据效率低的后果。同时由于数据细粒度化、终端的细粒度化，导致同一用户数据，在不同终端不一致的问题。首先，用户相关数据在不用的服务端或不同的客户端，通过普通技术实现各个终端展现的用户数据的一致性很复杂；其次，在客户端维护用户相关数据的容灾，会给客户端带来额外的损耗；最后，用户相关数据保存在服务端，带来的网络损耗很大。

当前技术中数据同步方法种类繁多，然而大多数数据同步方法仅仅只是解决了减轻数据服务器的负载或者是解决了维护数据的容灾。例如，通过资源管理服务器的协调和管理，完成客户端之间的数据同步过程，并减轻数据服务器的负载。或者，通过建立数据缓存系统，建立统一缓存管理器解决维护数据容灾的方法。但是还未解决不同终端展现的用户数据一致性的问题。 

发明内容

为了解决上述问题，本发明提出一种分布式数据存储设备处理数据的方法及装置，实现数据在不同终端展现的一致性。

本发明一方面提出一种分布式数据存储设备处理数据的方法，包括：

服务器接收客户端发送的数据查询请求，所述服务器为保存数据服务器上报的数据的分布式文件存储设备集群；

服务器根据所述数据查询请求查询本地保存的数据，并将查询的数据反馈至发送所述数据查询请求的客户端。

还提供一种分布式数据存储设备处理数据的装置，包括：

请求接收单元，用于接收客户端发送的数据查询请求，

数据保存单元，为用于保存数据服务器上报的数据的分布式文件存储设备集群；

数据反馈单元，用于根据所述请求接收单元接收的数据查询请求查询所述数据保存单元本地保存的数据，并将查询的数据反馈至发送所述数据查询请求的客户端。

本发明提供的技术方案中，服务器为分布式文件存储设备集群，在保存数据服务器上报的数据时，可以备份保存多份数据服务器上报的数据，且保存的数据与用户标识对应，使服务器保存的各客户端的用户数据一致，提高了数据存储效率。。

附图说明

图1为本发明实施例一提供的分布式数据存储设备处理数据的方法的流程示意图。

图2为本发明实施例二提供的分布式数据存储设备处理数据的装置的结构示意图。

图3为本发明实施例三提供的搭建MongoDB集群的结构示意图。

图4为本发明实施例三提供的MongoDB集群的结构连接示意图。

具体实施方式

为了使发明的目的、技术方案及优点更加清楚明白，以下结合附图及实施方式，对本发明进一步详细说明。应当理解所描述的具体实施方式仅仅用以解释本发明，并不用于限定本发明。

 本发明提供的实施例中，为客户端提供服务的服务器优选的为分布式文件存储设备集群，例如具有分布式文件存储数据库的服务器的集群，具体的，该集群可以是任何支持分布式文件存储方式的设备，如支持MongoDB的设备，下面，本发明将以该MongoDB为例进行相关描述。

MongoDB在数据存储上按命名空间来划分，一个Collection是一个命名空间，一个索引也是一个命名空间。 同一个命名空间的数据被分成很多个Extent，Extent之间使用双向链表连接。在每一个Extent中，保存了具体每一行的数据，这些数据也是通过双向链接来连接的。每一行数据存储空间不仅包括数据占用空间，还可能包含一部分附加空间，这使得在数据Update变大后可以不移动位置。索引以BTree结构实现。

下面，将具有MongoDB设备的集群一致统称为MongoDB服务器。

实施例一