[发明专利]元数据集群分布式存储系统及读取、写入存储数据的方法

摘要

本发明公开了元数据集群分布式存储系统及读取、写入存储数据的方法。元数据集群分布式存储系统包括存储网路平台和管理网络平台，存储网路平台用以存储数据，以及向客户端传输数据；管理网络平台用以存储元数据、与所述元数据对应的数据存储于所述存储服务器集群中的所述位置信息，根据预设的分流策略响应客户端的读写请求以及控制所述存储网路平台中的数据文件复制请求，所述管理网络平台为拓扑结构。

主权项

一种元数据集群分布式存储系统，其特征在于，包括：存储网路平台，所述存储网路平台为存储服务器集群，所述存储服务器集群包括有复数个数据存储服务器，每个所述数据存储服务器匹配有唯一的位置信息，用以存储数据，以及向客户端传输数据；管理网络平台，所述管理网络平台为管理服务器集群，用以存储元数据、与所述元数据对应的数据存储于所述存储服务器集群中的位置信息，根据预设的分流策略响应客户端的读写请求以及控制所述存储网路平台中的数据文件复制请求，所述管理网络平台为拓扑结构；所述管理服务器集群包括复数个元数据管理服务器，每个所述元数据管理服务器存储有所述元数据，所述元数据匹配的相应的版本号及所述元数据对应的数据存储于所述存储服务器集群中的所述位置信息；根据所述分流策略所述客户端读取存储数据请求包括下述步骤：A1.客户端从所述管理服务器集群的拓扑结构中选择一个与所述客户端拓扑关系最近的所述元数据管理服务器单线连接，并记录所述元数据管理服务器对应所述元数据的所述版本号和所述位置信息；A2.所述客户端随机抽取所述管理服务器集群中一半数目的所述元数据管理服务器，获取一半数目中所述元数据管理服务器的所述版本号中的最大版本号，并记录所述最大版本号；A3.判断所述最大版本号是否为一个，若是，执行A5；若否，执行A4；A4.获取与所述客户端拓扑关系最近的所述最大版本号对应的所述元数据管理服务器的位置信息；A5.判断所述最大版本号是否小于所述版本号，若是，执行A6；若否，执行A7；A6.所述客户端下载所述版本号对应的所述元数据管理服务器中的所述元数据，根据所述元数据对应的位置信息，获取所述客户端读请求的文件数据对应的位置信息，读取与所述位置信息对应的所述数据存储服务器中的存储数据；以与所述客户端单线连接的所述元数据管理服务器中所述元数据和所述版本号为基准更新所述管理服务器集群，执行A9；A7.所述客户端断开与所述元数据管理服务器的单线连接，所述客户端连接与所述客户端拓扑关系最近的所述最大版本号对应的所述元数据管理服务器，并记录所述最大版本号以及与所述客户端拓扑关系最近的所述最大版本号对应的所述元数据管理服务器的位置信息；A8.所述客户端下载与所述客户端拓扑关系最近的所述最大版本号对应的所述元数据管理服务器中的所述元数据，根据所述元数据对应的所述位置信息，获取所述客户端读请求的文件数据对应的位置信息，读取与所述位置信息对应的所述数据存储服务器中的存储数据；以与所述客户端连接的所述元数据管理服务器中所述元数据和所述最大版本号为基准更新所述管理服务器集群；A9.结束。