[发明专利]一种分布式存储内存管理方法、系统及计算机存储介质

说明书

本发明公开一种分布式存储内存管理方法、系统及计算机存储介质，该方法包括：将内存管理模块分成多种大小不同的数据块类型；在第一节点写入文件，并对所述文件设置租约，使所述文件与第一节点绑定；在内存中，将文件对应一种数据块类型，并将文件在内存中分成一个或多个大小相同的数据块，同时生成数据块的访问上下文，所述访问上下文包括数据块导引和所属文件编码；将所述数据块和访问上下文存储在第一节点并更新版本；当在第二节点写入文件，所述文件的租约已被第一节点持有，则所述第一节点接收从第二节点转发的文件，并将所述文件写入第一节点的本地存储并更新版本。数据的写入是基于数据块的操作，使分布式存储中，文件能够支持随机写。

技术领域

本发明涉及存储技术领域，更具体的说，涉及一种分布式存储内存管理方法、系统及计算机存储介质。

背景技术

分布式存储系统，是将数据分散存储在多台独立的设备上。传统的网络存储系统采用集中的存储服务器存放所有数据，存储服务器成为系统性能的瓶颈，也是可靠性和安全性的焦点，不能满足大规模存储应用的需要。分布式网络存储系统采用可扩展的系统结构，利用多台存储服务器分担存储负荷，利用位置服务器定位存储信息，它不但提高了系统的可靠性、可用性和存取效率，还易于扩展。

分布式存储系统中的，现有的内存管理方法对多台机器对文件进行读写操作无法高效的完成。

发明内容

本发明所要解决的技术问题是提供一种高效的分布式存储内存管理方法、系统及计算机存储介质。

本发明的目的是通过以下技术方案来实现的：

一种分布式存储内存管理方法，包括：

将内存管理模块分成多种大小不同的数据块类型；

在第一节点写入文件，并对所述文件设置租约，使所述文件与第一节点绑定；

在内存中，将文件对应一种数据块类型，并将文件在内存中分成一个或多个大小相同的数据块，同时生成数据块的访问上下文，所述访问上下文包括数据块导引和所属文件编码；

将所述数据块和访问上下文存储在第一节点并更新版本；

当在第二节点写入文件，所述文件的租约已被第一节点持有，则所述第一节点接收从第二节点转发的文件，并将所述文件写入第一节点的本地存储并更新版本。

进一步的，还包括：

在第一节点分别从一个或多个数据块中读取数据；

如果数据在第一节点则直接读取；

如果数据在第二节点则向第二节点请求数据，请求数据后将数据缓存到第一节点并更新版本。

进一步的，所述请求数据后将数据缓存到第一节点并更新版本还包括：

请求数据后判断数据本地存储版本与全局版本；

如果数据版本为最新的版本则直接加载；

如果数据版本低于全局版本，则请求最新版本的数据，请求最新版本的数据后将数据缓存到第一节点。

进一步的，还包括：内存管理模块中设置工作数据块链和空闲数据块链；

对数据块进行操作，并将数据块根据状态插入工作数据块链或空闲数据块链；

将工作数据块链中的数据块释放后插入空闲数据块链；

从空闲数据块链中取出一个数据块放入工作数据块链。

进一步的，还包括：

按预设周期且按预设比例释放空闲数据块链中的数据块。

进一步的，所述对数据块进行操作包括：