[发明专利]一种文件存储的方法及系统在审
申请号: | 202011413112.1 | 申请日: | 2020-12-07 |
公开(公告)号: | CN112199054A | 公开(公告)日: | 2021-01-08 |
发明(设计)人: | 许式伟;时嘉赟;江文龙 | 申请(专利权)人: | 上海七牛信息技术有限公司 |
主分类号: | G06F3/06 | 分类号: | G06F3/06;G06F11/10 |
代理公司: | 上海硕力知识产权代理事务所(普通合伙) 31251 | 代理人: | 郭桂峰 |
地址: | 201203 上海市浦东新区中*** | 国省代码: | 上海;31 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 文件 存储 方法 系统 | ||
1.一种文件存储的方法,其特征在于,包括以下步骤:
S1:获取条带剩余存储空间,根据条带剩余存储空间和待写入文件大小确定写入数据量,所述的条带包括多个副本存储区和一个校验码存储区;
S2:根据所述确定的数据量,从待写入文件中读取所述数据量的数据块,将所述数据块同时写入条带的多个副本存储区中,所述的多个副本存储区和校验码存储区的大小根据预定义的配置确定;
S3:检测条带的数据是否写满,如果写满,则对所述条带进行纠删码计算,获得所述条带的EC校验码;
S4:将所述获得的EC校验码存储在所述条带的校验码存储区中。
2.如权利要求1所述的方法,其特征在于,所述的多个副本存储区包括一个纠删码数据区和多个非纠删码数据区,所述的纠删码数据区是指对数据副本按照纠删码技术进行编码分片存放的存储区,所述非纠删码数据区是指对数据副本不按纠删码技术存放的存储区。
3.如权利要求2所述的方法,其特征在于,所述的多个副本存储区包括一个纠删码数据区和两个非纠删码数据区。
4.如权利要求2所述的方法,其特征在于,在所述的步骤S4完成后,将条带的非纠删码数据区删除。
5.如权利要求2所述的方法,其特征在于,在步骤S3中所述的获得所述条带的EC校验码的方法为:根据条带的纠删码数据区计算条带的EC校验码。
6.如权利要求1所述的方法,其特征在于,所述校验码存储区与副本存储区分别位于隔离存储设备上。
7.如权利要求1所述的方法,其特征在于,所述的预定义的配置包括条带空间的大小、副本存储区的数量。
8.一种文件存储的系统,其特征在于,包括:
条带管理模块:用于获取条带剩余存储空间,根据条带剩余存储空间和待写入文件大小确定写入数据量,所述的条带包括多个副本存储区和一个校验码存储区;
文件存储模块:用于根据所述确定的数据量,从待写入文件中读取所述数据量的数据块,将所述数据块同时写入条带的多个副本存储区中,所述的多个副本存储区和校验码存储区的大小根据预定义的配置确定;
纠删码计算模块:用于检测条带的数据是否写满,如果写满,则对所述条带进行纠删码计算,获得所述条带的EC校验码;
校验块存储模块:用于将所述获得的EC校验码存储在所述条带的校验码存储区中。
9.如权利要求8所述的系统,其特征在于,还包括:
异步控制模块:用于在条带写满后异步启动纠删码计算模块进行纠删码的计算。
10.一种电子设备,其特征在于,所述设备包括处理器以及存储器,
所述存储器用于存储可执行程序;
所述处理器用于执行所述可执行程序以实现权利要求1-7所述的任意一种文件存储的系统。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于上海七牛信息技术有限公司,未经上海七牛信息技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202011413112.1/1.html,转载请声明来源钻瓜专利网。