[发明专利]一种分布式存储内存管理方法、系统及计算机存储介质有效
申请号: | 201710480382.6 | 申请日: | 2017-06-22 |
公开(公告)号: | CN107329695B | 公开(公告)日: | 2020-03-20 |
发明(设计)人: | 江汛洋;梁松涛;李道兵;许式伟 | 申请(专利权)人: | 上海七牛信息技术有限公司 |
主分类号: | G06F3/06 | 分类号: | G06F3/06 |
代理公司: | 上海硕力知识产权代理事务所(普通合伙) 31251 | 代理人: | 郭桂峰 |
地址: | 201203 上海市浦东新区中国(上海)自*** | 国省代码: | 上海;31 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 分布式 存储 内存 管理 方法 系统 计算机 介质 | ||
1.一种分布式存储内存管理方法,其特征在于,包括:
将内存管理模块分成多种大小不同的数据块类型;
在第一节点写入文件,并对所述文件设置租约,使所述文件与第一节点绑定;
在内存中,将文件对应一种数据块类型,并将文件在内存中分成一个或多个大小相同的数据块,同时生成数据块的访问上下文,所述访问上下文包括数据块导引和所属文件编码;
将所述数据块和访问上下文存储在第一节点并更新版本;
当在第二节点写入文件,所述文件的租约已被第一节点持有,则所述第一节点接收从第二节点转发的文件,并将所述文件写入第一节点的本地存储并更新版本。
2.如权利要求1所述的一种分布式存储内存管理方法,其特征在于,还包括:
在第一节点分别从一个或多个数据块中读取数据;
如果数据在第一节点则直接读取;
如果数据在第二节点则向第二节点请求数据,请求数据后将数据缓存到第一节点并更新版本。
3.如权利要求2所述的一种分布式存储内存管理方法,其特征在于,所述请求数据后将数据缓存到第一节点并更新版本还包括:
请求数据后判断数据本地存储版本与全局版本;
如果数据版本为最新的版本则直接加载;
如果数据版本低于全局版本,则请求最新版本的数据,请求最新版本的数据后将数据缓存到第一节点。
4.如权利要求1所述的一种分布式存储内存管理方法,其特征在于,还包括:内存管理模块中设置工作数据块链和空闲数据块链;
对数据块进行操作,并将数据块根据状态插入工作数据块链或空闲数据块链;
将工作数据块链中的数据块释放后插入空闲数据块链;
从空闲数据块链中取出一个数据块放入工作数据块链。
5.如权利要求4所述的一种分布式存储内存管理方法,其特征在于,还包括:按预设周期且按预设比例释放空闲数据块链中的数据块。
6.如权利要求4所述的一种分布式存储内存管理方法,其特征在于,所述对数据块进行操作包括:
将文件在内存中的单个数据块进行写、读、释放、刷入磁盘、同步到网络中、删除、更新文件大小、版本失效中的至少一种操作。
7.如权利要求1所述的一种分布式存储内存管理方法,其特征在于,还包括:内存只读入文件部分数据块进行操作。
8.一种分布式存储内存管理系统,其特征在于,包括:
内存管理模块,用于将内存管理模块分成多种大小不同的数据块类型;
写入模块,用于在第一节点写入文件,并对所述文件设置租约,使所述文件与第一节点绑定;
内存处理模块,用于在内存中,将文件对应一种数据块类型,并将文件在内存中分成一个或多个大小相同的数据块,同时生成数据块访问上下文,所述访问上下文包括数据块导引和所属文件编码;
存储模块,用于将所述数据块和访问上下文存储在第一节点并更新版本;
所述写入模块还用于当在第二节点写入文件,所述文件的租约已被第一节点持有,则所述第一节点接收从第二节点转发的文件,并将所述文件写入第一节点的本地存储并更新版本。
9.如权利要求8所述的一种分布式存储内存管理系统,其特征在于,所述系统还包括:
读取模块,用于在第一节点分别从一个或多个数据块中读取数据;如果数据在第一节点则直接读取;如果数据在第二节点则向第二节点请求数据,请求数据后将数据缓存到第一节点并更新版本。
10.如权利要求9所述的一种分布式存储内存管理系统,其特征在于,所述读取模块还用于请求数据后判断数据本地存储版本与全局版本;如果数据版本为最新的版本则直接加载;如果数据版本低于全局版本,则请求最新版本的数据,请求最新版本的数据后将数据缓存到第一节点。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于上海七牛信息技术有限公司,未经上海七牛信息技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201710480382.6/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种电力电缆装置
- 下一篇:一种保证数据崩溃一致性的方法及系统