[发明专利]一种分布式文件系统的文件读写方法及装置有效
申请号: | 201410371520.3 | 申请日: | 2014-07-30 |
公开(公告)号: | CN104965835B | 公开(公告)日: | 2018-12-07 |
发明(设计)人: | 王亮;周明伟;翁健;舒添翼;陈伟;许焰;张兴明 | 申请(专利权)人: | 浙江大华技术股份有限公司 |
主分类号: | G06F17/30 | 分类号: | G06F17/30 |
代理公司: | 北京同达信恒知识产权代理有限公司 11291 | 代理人: | 黄志华 |
地址: | 310053 浙江*** | 国省代码: | 浙江;33 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 分布式 文件系统 文件 读写 方法 装置 | ||
本发明公开了一种分布式文件系统的文件读写方法及装置,用于解决现有技术中访问较大文件时的效率低下,以及元数据服务器处理负荷过大的问题。该方法为:向元数据服务器发起文件创建请求,并接收元数据服务器根据文件创建请求返回的文件ID,文件ID中至少携带有数据节点信息;根据预设的编码规则将文件ID转换为字符串文件名;接收到用户通过字符串文件名发起的文件读写请求后,将字符串文件名按照预设的编码规则反编码为文件ID;根据文件ID读写数据节点信息指示的数据服务器中的文件。采用上述方法,有效降低了元数据服务器的处理负荷,提高了元数据服务器的并发处理能力,提高了文件访问的安全性、提高了大文件访问的效率。
技术领域
本发明涉及文件系统领域,尤其涉及一种分布式文件系统的文件读写方法及装置。
背景技术
分布式文件系统是指文件系统管理的物理存储资源不一定直接连接在本地节点上,而是通过计算机网络与节点相连。参阅图1所示,传统的分布式文件系统读写文件的具体步骤如下:
步骤100:客户端接收用户发送的创建文件请求;
步骤110:客户端向元数据服务器请求创建文件;
步骤120:客户端接收元数据服务器根据该创建文件请求将该文件在数据服务器中创建后返回的文件ID;
步骤130:客户端把文件ID编码为字符串文件名发送给用户;
步骤140:客户端接收用户通过该字符串文件名发起的文件读写请求;
步骤150:客户端将字符串文件名反编码为文件ID,并向元数据服务器请求该文件相关的数据服务器信息,该数据服务器信息用于指示将该文件被创建至在哪个数据服务器;
步骤160:客户端接收元数据服务器根据文件ID索引出的该文件的相关数据服务器信息;
步骤170:客户端根据元数据服务器返回的相关数据服务器信息读写该文件。
在执行步骤140后,客户端无法根据用户传入的该文件的文件名直接读写数据服务器,必须通过执行步骤150和步骤160之后,即必须通过从元数据服务器获取该文件的数据服务器信息之后,才能读写数据服务器。这种读写文件的方式降低了客户端访问文件的效率,同时也增大了元数据服务器的访问压力。
同时传统的分布式文件系统存储文件时,不区分文件的大小,对所有文件都采用副本的方式进行存储,其中,采用副本方式存储即存储一份源文件以及多份副本文件,如此在读写大文件时,必然导致访问效率低下。
另一方面,分布式文件系统接收多个进程读写文件时,元数据服务器只能按照请求的先后顺序,依次处理多个读写请求,也会降低元数据服务器的处理效率,增大元数据服务器的处理负荷。
发明内容
本发明实施例提供一种分布式文件系统的文件ID的生成方法及装置,用以解决现有技术中访问较大文件的效率低下,元数据服务器处理负荷大的问题。
本发明提供的解决方案如下:
一种分布式文件系统的文件读写方法,该方法包括:
向元数据服务器发起文件创建请求,并接收元数据服务器根据文件创建请求返回的文件ID,文件ID中至少携带有数据节点信息;
根据预设的编码规则将文件ID转换为字符串文件名;
接收到用户通过字符串文件名发起的文件读写请求后,将字符串文件名按照预设的编码规则反编码为文件ID;
根据文件ID读写数据节点信息指示的数据服务器中的文件。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于浙江大华技术股份有限公司,未经浙江大华技术股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201410371520.3/2.html,转载请声明来源钻瓜专利网。
- 上一篇:一种分析数据的系统及方法
- 下一篇:终端应用分类方法、服务器及系统