[发明专利]HDFS存储平台中的文件校验修复方法在审
申请号: | 202010435912.7 | 申请日: | 2020-05-21 |
公开(公告)号: | CN111782623A | 公开(公告)日: | 2020-10-16 |
发明(设计)人: | 李坚;张振江;刘云;吴靖钦;李佳欣;魏丽君 | 申请(专利权)人: | 北京交通大学 |
主分类号: | G06F16/182 | 分类号: | G06F16/182;G06F16/13;G06F11/14 |
代理公司: | 北京市商泰律师事务所 11255 | 代理人: | 黄晓军 |
地址: | 100044 北*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明提供了一种HDFS存储平台中的文件校验修复方法。包括:客户终端对文件数据进行分块处理后,生成并存储每个文件块的校验值,将各个文件块上传给HDFS存储平台,HDFS存储平台将一个文件块在多个数据节点上备份存储;客户终端向存储某个文件块的各个数据节点发送文件块校验请求,各个数据节点计算出某个文件块的校验值,并返回给客户终端;客户终端将各个数据节点返回的校验值和本地存储的校验值进行比对,根据比对结果确定数据节点上某个文件块的存储状态是否正常,通知存储状态为异常的数据节点对某个文件块进行修复。本发明通过将文件校验信息保存在客户终端本地,客户终端可在本地对HDFS所存文件进行可靠校验,而不需要留存整个文件副本。 | ||
搜索关键词: | hdfs 存储 平台 中的 文件 校验 修复 方法 | ||
【主权项】:
暂无信息
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京交通大学,未经北京交通大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/202010435912.7/,转载请声明来源钻瓜专利网。