[发明专利]基于心跳的数据同步装置、方法及分布式存储系统有效
申请号: | 201610082068.8 | 申请日: | 2016-02-05 |
公开(公告)号: | CN107046552B | 公开(公告)日: | 2020-10-23 |
发明(设计)人: | 刘存伟;吴国军;黄西华;金雪锋 | 申请(专利权)人: | 华为技术有限公司 |
主分类号: | H04L29/08 | 分类号: | H04L29/08 |
代理公司: | 北京三高永信知识产权代理有限责任公司 11138 | 代理人: | 罗振安 |
地址: | 518129 广东*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 基于 心跳 数据 同步 装置 方法 分布式 存储系统 | ||
本发明公开了一种基于心跳的数据同步方法,属于数据同步技术领域。所述方法用于分布式存储系统中,所述分布式存储系统存储有至少一个数据块组,且所述分布式存储系统存储包括多个存储设备;所述多个存储设备中的一个设备为存储所述数据块组的主设备,其余设备为存储所述数据块组的从设备,所述主设备执行所述方法,所述主设备获取所述数据块组的存取状态信息,根据所述数据块组的存取状态信息确定所述数据块组的心跳时间,根据所述数据块组的心跳时间向所述从设备发送数据同步指令,所述数据同步指令用于指示所述从设备进行数据同步,达到降低分布式存储系统的系统开销,提高存储系统的读写性能的效果。
技术领域
本发明涉及数据同步技术领域,特别涉及一种基于心跳的数据同步装置、方法及分布式存储系统。
背景技术
在数据同步技术领域中,Raft一致性算法广泛应用在分布式存储系统中。
目前,在基于Raft一致性算法的分布式存储系统中的数据分为若干个数据块组,每个数据块组由分别存储在不同存储设备中的多个相同数据块组成,在实现Raft一致性算法时,以数据块组为单位进行数据同步。具体的,对于一个数据块组,该数据块组的各个数据块所在的存储设备首先通过选举的方式产生该数据块组的一个主设备,相应的,其它设备为该数据块组的从设备,其中,主设备负责处理与客户端之间的交互。当主设备接收到客户端发送的读写指令时,将读写指令记录为日志,并按照固定的心跳时间向各个从设备发送包含该日志的数据同步指令,由各个从设备根据该数据同步指令进行数据同步;若在心跳时间达到时没有要发送的日志,则主设备需要向各个从设备发送不包含数据同步指令的心跳信号,以确定连接正常。
在实现本发明的过程中,发明人发现现有技术至少存在以下问题:
现有的Raft一致性算法中,各个数据块组的心跳时间都是固定值,而各个数据块组的读写频率却并不均衡,为了保证读写频率较高的数据块组中各个数据块之间能够及时同步,该固定值通常设置的较小,从而导致读写频率较低的数据块组所在的各个存储设备之间也需要频繁的收发信号,导致系统开销较大,影响存储系统的读写性能。
发明内容
为了解决现有技术中读写频率较低的数据块组所在的各个存储设备之间也需要频繁的收发的信号,导致系统开销较大,影响存储系统的读写性能的问题,本发明实施例提供了一种装置、方法及分布式存储系统。所述技术方案如下:
分布式存储系统存储有至少一个数据块组,且该分布式存储系统包括多个存储设备;该多个存储设备中的一个设备为存储该数据块组的主设备,其余设备为存储该数据块组的从设备。该分布式存储系统还可以包括协调设备,该协调设备与分布式存储系统中的各个存储设备相连。
第一方面,提供了一种基于心跳的数据同步方法,该方法包括:
主设备获取该数据块组的存取状态信息;该主设备根据该数据块组的存取状态信息确定该数据块组的心跳时间;该主设备根据该数据块组的心跳时间向该从设备发送数据同步指令,该数据同步指令用于指示该从设备进行数据同步。
本发明实施例所示的方案,对于每一个数据块组,根据该数据块组的读写频率等相关信息自适应的确定数据块组的心跳时间,解决了现有的Raft一致性算法中,一个数据块组所在的各个存储设备之间需要频繁的收发的信号,导致系统开销较大,影响存储系统的读写性能的问题;达到了降低分布式存储系统的系统开销,提高存储系统的读写性能的效果。
在第一方面的第一种可能实现方式中,数据块组的存取状态信息包括数据块组的读频率和写频率。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于华为技术有限公司,未经华为技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201610082068.8/2.html,转载请声明来源钻瓜专利网。
- 上一篇:一种数据请求、更新方法及相应装置
- 下一篇:车辆服务处理方法及移动终端
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置