[发明专利]一种HDFS分布式文件系统的自适应容错调节方法有效
申请号: | 201611224890.X | 申请日: | 2016-12-27 |
公开(公告)号: | CN106777238B | 公开(公告)日: | 2019-10-18 |
发明(设计)人: | 徐维祥;赵博 | 申请(专利权)人: | 北京交通大学 |
主分类号: | G06F16/11 | 分类号: | G06F16/11;G06F16/182;G06F11/14 |
代理公司: | 北京正理专利代理有限公司 11257 | 代理人: | 付生辉;张雪梅 |
地址: | 100044*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明公开一种HDFS分布式文件系统自适应容错调节方法,包括:S1:初始化系统,获取主节点与从节点的心跳信息,获取节点间的节点间连通信息;S2:建立中间数据存储器,接入HDFS主节点与所有从节点连通,备份与恢复各节点的中间数据;S3:进行自适应故障诊断;S4:调用任务容错调节阶段流程;S5:根据情况选择调用节点容错调节阶段流程;S6:根据情况选择调用线路容错调节阶段流程。本发明基于具有良好容错能力的HDFS分布式文件系统,通过设计中间数据恢复机制,大大提高了中断任务再执行的运行效率。 | ||
搜索关键词: | 一种 hdfs 分布式 文件系统 自适应 容错 调节 方法 | ||
【主权项】:
1.一种HDFS分布式文件系统的自适应容错调节方法,其特征在于,该方法包括以下步骤:S1:初始化系统,获取主节点与从节点的心跳信息,获取节点间的节点间连通信息;S2:建立中间数据存储器,接入HDFS主节点与所有从节点连通,备份与恢复各节点的中间数据;S3:进行自适应故障诊断,通过初始化各节点的信任度信度因子构建三位信度因子矩阵,通过计算以及阈值比较来确定故障类型为线路故障或节点故障,并进入相应容错调节阶段流程;S4:调用任务容错调节阶段流程;S5:根据情况选择调用节点容错调节阶段流程;S6:根据情况选择调用线路容错调节阶段流程。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京交通大学,未经北京交通大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201611224890.X/,转载请声明来源钻瓜专利网。
- 上一篇:一种表面缺陷的分析方法
- 下一篇:推荐信息生成方法、装置及计算机设备