[发明专利]一种硬盘迁移方法、分布式存储集群系统和存储介质有效
申请号: | 202011037231.1 | 申请日: | 2020-09-28 |
公开(公告)号: | CN111880751B | 公开(公告)日: | 2020-12-25 |
发明(设计)人: | 寇耀飞;罗心;王志豪 | 申请(专利权)人: | 浙江大华技术股份有限公司 |
主分类号: | G06F3/06 | 分类号: | G06F3/06 |
代理公司: | 深圳市威世博知识产权代理事务所(普通合伙) 44280 | 代理人: | 黎坚怡 |
地址: | 310051 浙江*** | 国省代码: | 浙江;33 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 硬盘 迁移 方法 分布式 存储 集群 系统 介质 | ||
本申请公开了一种硬盘迁移方法、分布式存储集群系统和存储介质,该方法应用于元数据服务器,其包括:建立用户文件、数据节点信息、硬盘信息以及数据块存储信息之间的对应关系,得到数据关系表,并进行存储;在接收到硬盘迁移指令后,通过当前数据节点服务器限制对待迁移硬盘中的数据块进行操作,当前数据节点服务器为待迁移硬盘当前所在的数据节点服务器;在硬盘迁移完成后,接收新的数据节点服务器上报的更新信息,新的数据节点服务器为待迁移硬盘预迁入的数据节点服务器;基于更新信息对数据关系表中待迁移硬盘对应的信息进行更新,并解除对待迁移硬盘中的数据块的限制。通过上述方式,本申请能够提高分布式存储集群系统的可靠性与可用性。
技术领域
本申请涉及通信技术领域,具体涉及一种硬盘迁移方法、分布式存储集群系统和存储介质。
背景技术
在分布式存储集群系统中,每台数据节点服务器及其硬盘在首次上线时都会被元数据服务器分配本集群独有的标记信息,从而可以支持在集群内部,数据节点服务器和硬盘物理位置的迁移,即只要数据节点服务器和硬盘所携带的集群标识没有发生变化,它们就可以被该集群的元数据服务器感知,确保硬盘迁移过程中集群数据的完整性。
目前有些硬盘迁移方案存在以下不足:1)如果在硬盘迁移之前存储器分区损坏,则无法清除数据节点服务器中的硬盘信息,进而无法完成硬盘迁移动作;2)采用扁平化设计的存储集群,使得写入业务性能较差。有些技术方案存在以下问题:1)在硬盘迁移数量较多的情况下,节点性能和内存的压力较大,严重时会影响到集群的正常业务;2)在硬盘迁移过程中,由于硬盘离线而失效的数据块,需要等到硬盘迁移完成并且其数据块全量汇报后才会被更新,在这段时间内,业务层对文件执行的读取业务都会失败,影响了用户体验;3)在硬盘迁移过程中,数据节点服务器需要将硬盘中所有文件存储信息上报给元数据服务器,从而导致数据块上报的通信协议包较大,占用过多系统带宽和内存资源。
发明内容
本申请提供一种硬盘迁移方法、分布式存储集群系统和存储介质,能够提高分布式存储集群系统的可靠性与可用性。
为解决上述技术问题,本申请采用的技术方案是提供一种硬盘迁移方法,该方法应用于元数据服务器,其包括:建立用户文件、数据节点信息、硬盘信息以及数据块存储信息之间的对应关系,得到数据关系表,并进行存储;在接收到硬盘迁移指令后,通过当前数据节点服务器限制对待迁移硬盘中的数据块进行操作,其中,当前数据节点服务器为待迁移硬盘当前所在的数据节点服务器;在硬盘迁移完成后,接收新的数据节点服务器上报的更新信息,其中,新的数据节点服务器为待迁移硬盘预迁入的数据节点服务器,更新信息包括新的数据节点信息与新的硬盘信息;基于更新信息对数据关系表中待迁移硬盘对应的信息进行更新,并解除对待迁移硬盘中的数据块的限制。
为解决上述技术问题,本申请采用的另一技术方案是提供一种分布式存储集群系统,该分布式存储集群系统包括元数据服务器、多个与元数据服务器连接的数据节点服务器以及与数据节点服务器连接的待迁移硬盘,元数据服务器包括互相连接的存储器和处理器,其中,存储器用于存储计算机程序,计算机程序在被处理器执行时,用于实现上述的硬盘迁移方法。
为解决上述技术问题,本申请采用的另一技术方案是提供一种计算机可读存储介质,该计算机可读存储介质用于存储计算机程序,计算机程序在被处理器执行时,用于实现上述的硬盘迁移方法。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于浙江大华技术股份有限公司,未经浙江大华技术股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202011037231.1/2.html,转载请声明来源钻瓜专利网。
- 上一篇:电容器及其制备方法
- 下一篇:一种IMU中加速度计的标定方法及相关装置