[发明专利]一种数据获取方法、装置、电子设备及存储介质在审
申请号: | 202011403471.9 | 申请日: | 2020-12-02 |
公开(公告)号: | CN112511634A | 公开(公告)日: | 2021-03-16 |
发明(设计)人: | 谢人超;赵浩然;任语铮;喻嘉艺;黄韬 | 申请(专利权)人: | 北京邮电大学 |
主分类号: | H04L29/08 | 分类号: | H04L29/08;G06F3/06 |
代理公司: | 北京柏杉松知识产权代理事务所(普通合伙) 11413 | 代理人: | 马敬;项京 |
地址: | 100876 *** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 数据 获取 方法 装置 电子设备 存储 介质 | ||
1.一种数据获取方法,其特征在于,应用于分布式哈希表DHT网络中的代理服务器,所述代理服务器与多个存储节点连接,所述方法包括:
接收客户端发送的第一数据请求,所述第一数据请求中包括待请求的第一数据的第一数据信息;
按照预设哈希算法,确定所述第一数据信息的第一哈希值;
根据预先存储的哈希值与存储节点的对应关系,确定所述第一哈希值对应的第一存储节点;
向所述第一存储节点发送所述第一数据请求,以使所述第一存储节点在所述第一数据已迁移至第二存储节点的情况下,向所述代理服务器反馈指示消息,所述指示消息用于告知所述代理服务器所述第一数据已迁移至所述第二存储节点;
根据所述指示消息,向所述第二存储节点发送所述第一数据请求;
接收所述第二存储节点根据所述第一数据请求反馈的所述第一数据,并将所述第一数据转发至所述客户端。
2.根据权利要求1所述的方法,其特征在于,所述方法还包括:
根据预设存储的存储节点和备份存储节点的对应关系,确定第三存储节点,所述第三存储节点对应的备份存储节点的数量小于预设存储数量,每一存储节点对应的备份存储节点为备份该存储节点上原始数据的存储节点;
从所述代理服务器连接的多个存储节点中,确定未存储有所述第三存储节点上原始数据且剩余存储空间最大的第四存储节点;
将所述第三存储节点上的原始数据备份至所述第四存储节点,并存储所述第三存储节点与所述第四存储节点的对应关系。
3.根据权利要求1所述的方法,其特征在于,在向所述第一存储节点发送所述第一数据请求之后,所述方法还包括:
若未接收到针对所述第一数据请求的应答信息或所述指示信息,则重新向所述第一存储节点发送第一数据请求,所述应答信息包括所述第一数据;
若连续发送预设数量条第一数据请求均未接收到应答信息或指示信息,则根据预设存储的存储节点和备份存储节点的对应关系,确定所述第一存储节点对应的备份存储节点,每一存储节点对应的备份存储节点为备份该存储节点上原始数据的存储节点;
将所述第一数据请求转发至所述第一存储节点对应的备份存储节点。
4.根据权利要求1所述的方法,其特征在于,所述多个存储节点包括物理存储节点和虚拟存储节点,所述方法还包括:
接收数据存储请求,所述数据存储请求包括待存储的第二数据的第二数据信息;
按照预设哈希算法,确定所述第二数据信息的第二哈希值;
根据预先存储的哈希值与存储节点的对应关系,确定所述第二哈希值对应的第五存储节点;
若所述第五存储节点为虚拟存储节点,则根据预先存储的物理存储节点与虚拟存储节点的对应关系,确定所述第五存储节点对应的物理存储节点;
将所述第二数据存储至所述第五存储节点对应的物理存储节点中。
5.根据权利要求1所述的方法,其特征在于,所述方法还包括:
接收待退出的第六存储节点发送的数据迁移请求,所述数据迁移请求中包括所述第六存储节点存储的各个原始数据的第三数据信息;
按照预设哈希算法,确定所述第六存储节点上每个原始数据的第三数据信息的第三哈希值;
根据预先存储的哈希值与存储节点的对应关系,确定每个第三哈希值对应的新存储节点,作为所述第六存储节点上每个原始数据对应的新存储节点;
向所述第六存储节点发送数据迁移指令,所述数据迁移指令包括所述第六存储节点上每个原始数据对应的新存储节点的标识,以使所述第六存储节点根据所述数据迁移指令,将所述第六存储节点上每个原始数据分别迁移至对应的新存储节点。
6.根据权利要求5所述的方法,其特征在于,在所述向所述第六存储节点发送数据迁移指令之后,所述方法还包括:
接收所述第六存储节点发送的迁移结束消息,所述迁移结束消息指示所述第六存储节点上每个原始数据迁移完成;
根据所述迁移结束消息,删除每个第三哈希值与所述第六存储节点的对应关系,并存储每个第三哈希值与该第三哈希值对应的新存储节点的对应关系。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京邮电大学,未经北京邮电大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202011403471.9/1.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置