[发明专利]一种大数据系统的节点迁移方法在审
申请号: | 201811175310.1 | 申请日: | 2018-09-30 |
公开(公告)号: | CN110971647A | 公开(公告)日: | 2020-04-07 |
发明(设计)人: | 王丹华;黄陈蓉;范大娟 | 申请(专利权)人: | 南京工程学院 |
主分类号: | H04L29/08 | 分类号: | H04L29/08 |
代理公司: | 暂无信息 | 代理人: | 暂无信息 |
地址: | 211167 江苏省*** | 国省代码: | 江苏;32 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 数据 系统 节点 迁移 方法 | ||
1.一种大数据系统的节点迁移方法,其特征在于,包括以下步骤:
(1)当源节点需要迁移时,其向管理服务器查询并获取当前的节点列表;
(2)所述源节点向节点列表中的各个节点发送查询请求,请求各个节点返回其节点负载率及空闲网络带宽;
(3)每个收到查询请求的节点,都将其节点负载率和空闲网络带宽作为应答消息返回给所述源节点,所述源节点基于发送查询请求和收到应答消息的时间,对各节点进行筛选;
(4)设步骤3筛选后得到了n个节点Node1,Node2,……,Noden;其中Nodei的空闲网络带宽为Ai,节点负载率为Bi(1≤i≤n),则源节点为Nodei计算迁移指数Ti,即
Ti=Ai(1-Bi)2
(5)所述源节点基于所述迁移指数、需要迁移的数据量,为所述n个节点分配相应的迁移数据量;
(6)所述源节点基于为所述n个节点分配的迁移数据量,向所述n个节点中的每个节点发送数据,每个节点存储接收到的数据;
(7)当所述源节点发送完所有数据后,其向管理服务器发送一个发送结束消息,所述发送结束消息中包括了所述n个节点的标识;
(8)所述管理服务器确定迁移的目标节点,向所述n个节点发送迁移指令,所述迁移指令中包括了目标节点的地址;
(9)各节点在接收到迁移指令后,将存储的源节点数据发送给所述目标节点。
2.根据权利要求1所述的方法,其特征在于,所述步骤1中,由所述管理服务器命令源节点进行迁移,或者由源节点主动发起迁移请求。
3.根据权利要求1-2任意一项所述的方法,其特征在于,所述节点负载率是节点计算机处理器在过去一定时间内的平均使用率。
4.根据权利要求1-3任意一项所述的方法,其特征在于,所述步骤3中,对于每个节点,所述源节点计算发出查询请求和收到该节点的应答消息的时间差,得到该节点的响应时间,基于该响应时间对各节点进行筛选。
5.根据权利要求4所述的方法,其特征在于,所述源节点筛选出响应时间最小的n个节点,其中n是预先定义的节点数目。
6.根据权利要求4所述的方法,其特征在于,所述源节点筛选出响应时间少于预定义阈值的n个节点。
7.根据权利要求1-6所述的方法,其特征在于,所述步骤5中,设所述源节点需要迁移的数据量为S,则所述源节点计算为Nodei分配的迁移数据量Si为:
所述迁移数据量Si就是节点Nodei需要接收的源节点的数据量。
8.根据权利要求1所述的方法,其特征在于,所述目标节点是系统新建立的一个节点,或者是已有节点。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于南京工程学院,未经南京工程学院许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201811175310.1/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种大数据处理系统的去重方法
- 下一篇:垂直通道结构与存储元件
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置