[发明专利]分布式存储系统的数据同步方法、装置、设备及存储介质有效
申请号: | 201911121853.X | 申请日: | 2019-11-15 |
公开(公告)号: | CN112822227B | 公开(公告)日: | 2022-02-25 |
发明(设计)人: | 黎海兵 | 申请(专利权)人: | 北京金山云网络技术有限公司;北京金山云科技有限公司 |
主分类号: | H04L67/1095 | 分类号: | H04L67/1095;H04L67/1097 |
代理公司: | 北京博遵律师事务所 11761 | 代理人: | 马佑平 |
地址: | 100085 北京市*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 分布式 存储系统 数据 同步 方法 装置 设备 存储 介质 | ||
本发明公开了一种分布式存储系统的数据同步方法、装置、设备及存储系统,其中分布式存储系统包括主存储服务器和从存储服务器,该方法由主存储服务器实施,包括:确定从存储服务器是否成功写入第一日志信息,第一日志信息包括主存储服务器的本地日志文件中最新一条日志条目;当确定从存储服务器已成功写入第一日志信息后,确定是否有数据写入;如果确定没有数据写入,向从存储服务器发送第二日志信息,以通知从存储服务器存储第三日志信息,第二日志信息不具有日志条目;其中,第三日志信息包含当前已被设定数量的其他从存储服务器持久化的最新日志条目。
技术领域
本发明涉及通信技术领域,更具体地,涉及一种分布式存储系统的数据同步方法、一种分布式存储系统的数据同步装置、一种分布式存储系统的存储服务器以及一种计算机存储介质。
背景技术
目前,在分布式存储系统中,主存储服务器可以将本地日志文件中的日志条目同步至从存储服务器中。与此同时,主存储服务器还会通知从存储服务器当前已被大多数存储服务器持久化的最新日志条目的信息,以使得从存储服务器可将该条最新的日志条目及其之前的所有日志条目都读取并存储在对应的存储引擎中。
这种数据同步的方式会存在如下缺陷:主存储服务器在将本地日志文件中最后的一条日志条目同步至从存储服务器后,可能会出现一定时间内没有新数据被写入的情况,主存储服务器在一定时间内将不再与从存储服务器进行交互。因而,主存储服务器不能及时通知从存储服务器当前已经被大多数存储服务器持久化的最新日志条目的信息,导致该从存储服务器的存储引擎中的日志条目更新滞后,不能与主存储服务器的存储引擎中的日志条目保持同步。
发明内容
本发明的一个目的是提供一种用于分布式存储系统的数据同步的新技术方案。
根据本发明的第一方面,提供了一种分布式存储系统的数据同步方法,所述分布式存储系统包括主存储服务器和从存储服务器,所述方法由所述主存储服务器实施,包括:
确定所述从存储服务器是否成功写入第一日志信息,所述第一日志信息包括所述主存储服务器的本地日志文件中最新一条日志条目;
当确定所述从存储服务器已成功写入所述第一日志信息后,确定是否有数据写入;
如果确定没有数据写入,向所述从存储服务器发送第二日志信息,以通知所述从存储服务器存储第三日志信息,所述第二日志信息不具有日志条目;
其中,所述第三日志信息包含当前已被设定数量的其他从存储服务器持久化的最新日志条目。
可选的,其中,所述当确定所述从存储服务器已成功写入所述第一日志信息后,确定是否有数据写入,包括:
在确定所述从服务器已成功写入所述第一日志信息时,启动计时;
在所述计时时间到达预设时间的期间,监测所述本地日志文件中是否增加有日志条目;
如果确定所述本地日志文件中增加有日志条目,则确定有数据写入;
如果确定所述本地日志文件中未增加有日志条目,则确定没有数据写入。
可选的,其中,所述方法还包括:
在所述计时时间到达预设时间之前的任意时刻,如果监测到所述本地日志文件中增加有日志条目,则停止计时;
向所述从存储服务器发送第四日志信息,其中,所述第四日志信息至少包含所述本地日志文件中增加的日志条目。
可选的,其中,所述方法还包括:
当确定所述从存储服务器没有成功写入第一日志信息时,接收所述从存储服务器发送的第一序列号,所述第一序列号为所述从存储服务器中最新的日志条目的编号。
可选的,其中,所述方法还包括:
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京金山云网络技术有限公司;北京金山云科技有限公司,未经北京金山云网络技术有限公司;北京金山云科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201911121853.X/2.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置