[发明专利]数据存储方法、装置、系统、服务器、控制节点及介质有效
申请号: | 201811159536.2 | 申请日: | 2018-09-30 |
公开(公告)号: | CN109284073B | 公开(公告)日: | 2020-03-06 |
发明(设计)人: | 李坚;王文姝 | 申请(专利权)人: | 北京金山云网络技术有限公司;北京金山云科技有限公司 |
主分类号: | G06F3/06 | 分类号: | G06F3/06 |
代理公司: | 北京柏杉松知识产权代理事务所(普通合伙) 11413 | 代理人: | 马敬;项京 |
地址: | 100085 北京*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 数据 存储 方法 装置 系统 服务器 控制 节点 介质 | ||
本发明实施例提供了数据存储方法、装置、系统、服务器、控制节点及介质,数据存储方法应用于待分裂分片所属的主服务器,包括:接收控制节点发送的针对待分裂分片的准备拆分指令;将准备拆分指令发送给待分裂分片所属的从服务器;在接收到从服务器发送的数据拆分点的数量大于第一数量阈值时,将数据拆分点发送给控制节点;在接收到控制节点发送的拆分存储指令后,将拆分存储指令发送给每一从服务器,以使每一从服务器将待分裂分片进行拆分存储,得到目标分片;在接收到从服务器发送的第一消息的数量大于第二数量阈值时,将待分裂分片进行拆分存储,得到目标分片。应用本发明实施例提供的数据存储方法,提高存储系统的可用性。
技术领域
本发明涉及数据存储技术领域,特别是涉及一种数据存储方法、装置、系统、服务器、控制节点及介质。
背景技术
随着信息技术的快速发展,数据存储系统中的数据量越来越大。为了满足大数据量的存储需求,在多台服务器上运行的分布式存储系统得到了广泛的应用。为了提高分布式存储系统的整体存储总量,在分布式存储系统中采用分片存储的方式,将数据存储至分片中,使得分布式存储系统可以扩展,从而增加分布式存储系统的整体存储总量。
当数据要进行存储时,由于每一分片的数据存储范围不同,需要先确定该待存储数据应该存储到哪个分片,可以直接判断该待存储数据在哪个分片的数据存储范围之内,还可以通过一致性哈希算法确定该待存储数据存储在哪个数据分片上中。在确定分片之后,将数据存储至所确定的分片。为了保证数据和服务的高可用性,往往需要为分布式存储系统提供必要的容错机制,对各个分片进行冗余备份。在不同的服务器上存储相同的分片,可以避免由于单个服务器不可用时造成的数据丢失、存储服务不可用等情况的发生。需要说明的是,服务器分为主服务器和从服务器,这里所说的主服务器和从服务器是针对一个分片确定的,一个服务器可以是一个分片的主服务器,另一个分片的从服务器。
在实际应用中,分布式存储系统的分片的数据量或者请求压力的变化,会导致原有的分片无法提供足够的服务能力,需要将该分片中的数据存储至针对该分片创建的子分片中。具体的数据存储方法为:分布式存储系统中的控制节点确定需要将数据进行拆分存储的目标分片;将目标分片的状态由可写状态修改为不可写状态;确定存储目标分片拆分后的数据的服务器;向所确定的服务器发送分裂指令,所确定的服务器创建目标分片的子分片,并确定每一子分片的数据存储范围;根据每一子分片的数据存储范围,将目标分片中的数据存储至对应的子分片中。由于多个服务器存储同一个目标分片,针对每一目标分片均会执行一次上述方法。为了保证不同服务器中的目标分片的子分片中存储的数据的一致性,将目标分片的状态设置为不可写状态,但上述数据存储过程中,无法对目标分片进行写操作,在此期间会拒绝针对目标分片的写请求,这样降低了存储系统的可用性。
发明内容
本发明实施例的目的在于提供一种数据存储方法、装置、系统、服务器、控制节点及介质,以提高存储系统的可用性。具体技术方案如下:
第一方面,本发明实施例提供了一种数据存储方法,应用于待分裂分片所属的主服务器,所述方法包括:
接收控制节点发送的针对待分裂分片的准备拆分指令;
将所述准备拆分指令发送给所述待分裂分片所属的从服务器,以使每一所述从服务器在接收到所述准备拆分指令后,获得所述待分裂分片的数据拆分点,并将所述数据拆分点发送给所述主服务器;
在接收到数据拆分点的数量大于第一数量阈值时,将所述数据拆分点发送给所述控制节点,以使所述控制节点向所述主服务器发送拆分存储指令;
在接收到所述拆分存储指令后,将所述拆分存储指令发送给每一所述从服务器,以使每一所述从服务器将所述待分裂分片进行拆分存储,得到目标分片,在得到目标分片后,向所述主服务器发送第一消息,其中,所述第一消息为拆分存储完成的消息;
在接收到所述第一消息的数量大于第二数量阈值时,将所述待分裂分片进行拆分存储,得到所述目标分片。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京金山云网络技术有限公司;北京金山云科技有限公司,未经北京金山云网络技术有限公司;北京金山云科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201811159536.2/2.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置