[发明专利]一种分布式的文件存储方法有效
申请号: | 201611207434.4 | 申请日: | 2016-12-23 |
公开(公告)号: | CN108241640B | 公开(公告)日: | 2022-04-08 |
发明(设计)人: | 李振钊;王焰辉;曾刚 | 申请(专利权)人: | 中科星图股份有限公司 |
主分类号: | G06F16/13 | 分类号: | G06F16/13;G06F16/182 |
代理公司: | 北京安博达知识产权代理有限公司 11271 | 代理人: | 徐国文 |
地址: | 101399 北京市顺义区临空经济核*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 分布式 文件 存储 方法 | ||
本发明公开了一种分布式的文件存储方法,该方法包括:使用多个文件存储服务器实现分布式的文件存储,并使用管理服务器对所述文件存储服务器进行管理;当需要存储文件时,由管理服务器根据文件长度,确定是否对文件分块,如果需要分块则确定文件的分块方式,将文件或者分块发送到相应的文件存储服务器进行存储;文件存储服务器根据接收的文件或数据块的哈希值确定该数据的存储方式。
【技术领域】
本发明属于计算机和文件存储领域,具体的,涉及一种分布式的文件存储方法。
【背景技术】
近年来,随着计算机技术对各个方面的渗透,各行各业都被计算机化了,许多原有的系统都被改造成计算机系统,原有的纸质文件也被改成计算机文件。计算机文件相对于纸质文件具有许多优点,例如容易复制,容易保存等等。但是,计算机文件如果都存储在同一个地方,也会有巨大的危险性,一旦该地方发生灾难,将造成大量文件丢失。因此,现有技术中出现了分布式文件存储的概念,一方面设置多个文件文件服务器,分布在不同地点,用于存储文件;另一方面,将同一文件存储在不同服务器上,实现了冗余备份。
但是,现有技术中的分布式文件存储没有考虑重复文件对存储空间的占用,造成了存储资源的浪费。
【发明内容】
为了解决现有技术中的上述问题,本发明提出了一种新的分布式的文件存储方法,其技术方案如下:
一种分布式的文件存储方法,该方法包括以下步骤:
步骤100:使用多个文件存储服务器实现分布式的文件存储,并使用管理服务器对所述文件存储服务器进行管理;
步骤200:当需要存储文件时,由管理服务器根据文件长度,确定是否对文件分块,如果需要分块则确定文件的分块方式,将文件或者分块发送到相应的文件存储服务器进行存储;
步骤300:文件存储服务器根据接收的文件或数据块的哈希值确定该数据的存储方式。
进一步地,所述管理服务器和文件服务器之间通过网络连接。
进一步地,所述网络是局域网。
进一步地,所述网络是互联网。
进一步地,所述网络是广域网。
本发明的技术效果是:提高了分布式文件存储的资源利用率。
【附图说明】
此处所说明的附图是用来提供对本发明的进一步理解,构成本申请的一部分,但并不构成对本发明的不当限定,在附图中:
图1是本发明方法的基本流程图。
【具体实施方式】
下面将结合附图以及具体实施例来详细说明本发明,其中的示意性实施例以及说明仅用来解释本发明,但并不作为对本发明的不当限定。
本发明方法所应用的系统结构包括管理服务器和多个文件服务器,所述管理服务器负责管理文件的清洗比对入库,而文件服务器用于存储数据。为了存储海量的数据,本发明的优选方案是使用256个文件服务器,当然这是对于大型数据存储系统而言的,如果使用者是小型企业,为了减少成本,也可以考虑将其中的多个服务器合并成一个,从而减少文件服务器数量。管理服务器和文件服务器之间,以及各个文件服务器之间通过网络连接,可以是局域网、互联网或者广域网。
在上述系统结构的基础上,本发明的方法的基本步骤如下:
步骤100:使用多个文件存储服务器实现分布式的文件存储,并使用管理服务器对所述文件存储服务器进行管理;
步骤200:当需要存储文件时,由管理服务器根据文件长度,确定是否对文件分块,如果需要分块则确定文件的分块方式,将文件或者分块发送到相应的文件存储服务器进行存储;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中科星图股份有限公司,未经中科星图股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201611207434.4/2.html,转载请声明来源钻瓜专利网。
- 上一篇:一种数据去重方法
- 下一篇:一种分布式数据库的操作方法