[发明专利]数据同步监控方法、装置、计算机设备及存储介质在审
申请号: | 202010158769.1 | 申请日: | 2020-03-09 |
公开(公告)号: | CN111522823A | 公开(公告)日: | 2020-08-11 |
发明(设计)人: | 黄嘉文 | 申请(专利权)人: | 平安科技(深圳)有限公司 |
主分类号: | G06F16/23 | 分类号: | G06F16/23;G06F16/27;G06F16/28 |
代理公司: | 深圳市赛恩倍吉知识产权代理有限公司 44334 | 代理人: | 刘丽华;孙芬 |
地址: | 518000 广东省深圳市福田区福*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 数据 同步 监控 方法 装置 计算机 设备 存储 介质 | ||
本发明提供一种数据同步监控方法及相关设备。所述方法将多个同步速度子序列聚类为多个第一马尔科夫状态簇,计算多个第一马尔科夫状态簇的状态转移矩阵;将每个数据项的多个同步时间间隔子序列聚类为每个数据项的多个第二马尔科夫状态簇,计算每个数据项的多个第二马尔科夫状态簇的状态转移矩阵;根据时间点n的同步速度子序列和多个第一马尔科夫状态簇的状态转移矩阵预测时间点n+1的所有数据项的同步速度;根据时间点n的每个数据项的同步时间间隔子序列和每个数据项的第二马尔科夫状态簇的状态转移矩阵预测每个数据项的同步时间间隔;对预测的同步时间间隔小于所需同步时间的数据项增加同步时间间隔。本发明增加了数据同步任务的稳定性。
技术领域
本发明涉及数据安全技术领域,具体涉及一种数据同步监控方法、装置、计算机设备及计算机存储介质。
背景技术
实际应用中,经常需要将电子设备中的多个数据同步至其他的电子设备(例如,将多个客户端的大量数据实时同步至服务器,再如,将本地服务器的大量数据实时同步至云服务器),以保持不同电子设备中的数据一致。在将一个电子设备的大量数据实时同步至另一个电子设备的过程中,可能会因为不同数据项在不同的时间同步、部分数据项的数据同步频率高而出现同步速度不稳定的情况,即同步速度过大或过小。例如,某一时间的待同步的数据项(包括同步频率高的部分数据项)多,数据量大,导致同步速度高,下一时间的待同步的数据项少,数据量小,导致同步速度低。同步速度不稳定容易产生数据同步错误,增加不同设备中的数据不一致的风险。现有的数据同步监控方法可以监控过去时间的同步速度是否稳定,但不能对将来的同步速度进行预测,也不能根据预测结果对数据同步任务进行调整。
发明内容
鉴于以上内容,有必要提出一种数据同步监控方法、装置、计算机设备及计算机存储介质,其可以对源端和目的端之间的数据同步任务进行监控,预测源端至目的端的同步速度,根据预测的同步速度调整数据同步任务。
本申请的第一方面提供一种数据同步监控方法,所述方法包括:
获取时间点1到时间点n从源端至目的端的同步速度序列{a1,a2,…ai,…,an};
获取时间点n之前从源端至目的端的每个数据项的同步时间序列,根据每个数据项的同步时间序列得到每个数据项的同步时间间隔序列;
以第一预设长度h为滑窗长度,以1为步长,从所述同步速度序列中获取第h个时间点至第n个时间点之间的多个同步速度子序列,对所述多个同步速度子序列进行聚类,得到多个第一马尔科夫状态簇,计算所述多个第一马尔科夫状态簇的状态转移矩阵;
以第二预设长度g为滑窗长度,以1为步长,从每个数据项的所述同步时间间隔序列中获取每个数据项的第g个时间点至第n个时间点之间的多个同步时间间隔子序列,对每个数据项的所述多个同步时间间隔子序列进行聚类,得到每个数据项的多个第二马尔科夫状态簇,计算每个数据项的所述多个第二马尔科夫状态簇的状态转移矩阵;
根据时间点n的同步速度子序列和所述多个第一马尔科夫状态簇的状态转移矩阵预测时间点n+1的所有数据项的同步速度;
判断预测的时间点n+1的同步速度是否在预定的阈值范围内;
若预测的时间点n+1的同步速度不在所述阈值范围内,根据时间点n的每个数据项的所述同步时间间隔子序列和每个数据项的所述第二马尔科夫状态簇的状态转移矩阵预测每个数据项的同步时间间隔;
对预测的同步时间间隔小于所需同步时间的数据项增加同步时间间隔。
另一种可能的实现方式中,所述计算所述多个第一马尔科夫状态簇的状态转移矩阵包括:
将每两个相邻时间点的同步速度子序列组合为同步速度子序列对,得到多个同步速度子序列对;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于平安科技(深圳)有限公司,未经平安科技(深圳)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010158769.1/2.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置