[发明专利]一种基于IP网络的数据存储方法

权利要求书

1.一种基于IP网络的数据存储方法，其特征在于，包括：

云平台存储系统中的主节点接收每一个数据服务器周期性发送的心跳消息，用于管理云平台的拓扑信息；

当客户端首次云平台时，客户端访问主节点获取云平台拓扑信息并缓存在本地，在客户端进行读取和写入时，首先获取文件名，对文件名进行散列计算，并确定对应的小文件所在的数据服务器；

在确定目标文件对应的数据服务器后，对比数据服务器保存的云平台拓扑信息和客户端保存的云平台拓扑信息的版本号，如果版本号一致，则在相应数据服务器中对小文件进行读取或写入操作。

2.根据权利要求1所述的方法，其特征在于，所述云平台的拓扑信息包括云平台中所有活动的数据服务器列表，及当前云平台拓扑信息的版本号；所述数据服务器列表中保存了每一个活动的数据服务器的ID和该数据服务器所监听的IP地址和端口，所述云平台拓扑信息版本号用时间戳表示，当云平台有新的数据服务器加入或者原有的数据服务器退出时，主节点重新生成一个云平台拓扑信息，并将这个云平台拓扑信息的版本号设置为当前时间戳，然后主节点将这个新的云平台拓扑信息发送到所有当前活动的数据服务器，以使所有的数据服务器保存同样的云平台全局信息。

3.根据权利要求2所述的方法，其特征在于，所述数据服务器包括文件块管理单元和存取信息管理单元，所述文件块管理单元将小文件合并成大文件块，利用预先分配好较大的文件块，将新写入的小文件写入大块内，在获得小文件所在块号、小文件在块内偏移量和小文件大小信息的情况下，从一个数据服务器中检索出该小文件，所述存取信息管理单元使用键值对存储来管理文件名到存取信息的映射关系。

4.根据权利要求1所述的方法，其特征在于，进一步包括，执行以下步骤实现小文件读取过程：

(1)如果客户端是首次访问云平台存储系统，则客户端访问主节点，请求云平台的拓扑信息，并记录到本地，在连续访问时，如果不是首次访问云平台存储系统，则客户端本地已缓存了云平台的拓扑信息；

(2)客户端对文件名进行散列，并按照一致性散列算法决定该小文件应由哪一个数据服务器进行处理；

(3)客户端访问步骤(2)中得到的数据服务器，判断客户端读请求中附带的云平台拓扑信息是否与本地数据服务器记录的云平台拓扑信息版本号一致，如果一致，转步骤(4)；如果不一致，标记为需要更新；

(4)数据服务器向所述存取信息管理单元查询该小文件的文件名，检查该小文件文件名是否存在，如果存在，读取出存取信息，转步骤(5)；如果不存在，则向客户端发送文件不存在消息，若步骤(3)设置了需要更新标记，则将新的云平台拓扑信息附带在文件不存在消息中，通知客户端更新缓存中的云平台拓扑信息，读操作结束；

(5)数据服务器通过步骤(4)中得到的存取信息，从文件块管理单元中读取小文件内容，并发送给客户端，如果标记了需要更新，则将新的云平台拓扑信息附带在该消息中，读操作结束。

5.根据权利要求4所述的方法，其特征在于，其中，在云平台拓扑发生变化时，客户端连续的读写请求根据客户端之前缓存的云平台拓扑信息，确定要访问的数据服务器，如果客户端连接成功，并正确进行了读取或者写入，则数据服务器判断出此时云平台拓扑发生变化，即新增节点或者有节点退出，并没有影响到该小文件的读写请求，同时客户端再完成此次读写请求后从请求消息中读取出附带的最新的云平台拓扑信息，更新客户端本地的云平台拓扑信息缓存；如果连接不成功，即要访问的节点已经失效退出，客户端重新访问主节点，获取当前最新的云平台拓扑信息，重新进行读写；如果访问成功但数据服务器判断出云平台拓扑变化影响了此次读写请求，则数据服务器回复客户端读写失败，并将最新的云平台拓扑信息附带给客户端，客户端重新进行读写。