[发明专利]多副本数据的时效性判断方法及装置有效
申请号: | 201911303750.5 | 申请日: | 2019-12-17 |
公开(公告)号: | CN111061595B | 公开(公告)日: | 2020-10-20 |
发明(设计)人: | 宋韶旭;孙宇;王建民 | 申请(专利权)人: | 清华大学 |
主分类号: | G06F11/14 | 分类号: | G06F11/14;G06F16/27 |
代理公司: | 北京路浩知识产权代理有限公司 11002 | 代理人: | 杨明月 |
地址: | 100084 北*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 副本 数据 时效性 判断 方法 装置 | ||
1.一种多副本数据的时效性判断方法,其特征在于,包括:
获取当前时刻的k个相互邻近的历史时刻的副本,并计算每两个相邻副本的时间差值和数据差值,以及当前时刻和最近副本的时间差值;
将所有时间差值和数据差值,输入至预设的差值模型,输出当前时刻和最近副本的数据差值预测结果;
若所述预测结果小于预设阈值,则判断所述最近副本具备时效性;
其中,所述差值模型,根据具有时效性的两两相邻的k个时间差值和数据差值样本,进行训练后得到。
2.根据权利要求1所述的多副本数据的时效性判断方法,其特征在于,所述将所有时间差值和数据差值,输入至预设的差值模型之前,还包括:
获取n+1个时间相互邻近的有时效性的数据副本,并计算每两个相邻时刻的时间差值和数据差值;
将每k个相邻的时间差值和数据差值作为一个训练样本,得到n-k+1个训练样本,利用n-k+1个训练样本对建立的差值模型进行训练,得到所述预设的差值模型。
3.根据权利要求2所述的多副本数据的时效性判断方法,其特征在于,所述利用n-k+1个训练样本对建立的差值模型进行训练,包括:
对于任意一个长度为k的样本,将时间较早的k-1个数据差值和k个时间差值,输入至建立的差值模型,得到最近的数据差值的预计值;
根据最近的数据差值和所述预计值,对所述差值模型进行更新。
4.根据权利要求1所述的多副本数据的时效性判断方法,其特征在于,所述差值模型包括线性回归模型、多项式回归模型和逻辑斯蒂回归模型。
5.根据权利要求3所述的多副本数据的时效性判断方法,其特征在于,对所述差值模型进行更新的方法包括最小二乘法和梯度下降法。
6.一种多副本数据的时效性判断装置,其特征在于,包括:
差值获取模块,用于获取当前时刻的k个相互邻近的历史时刻的副本,并计算每两个相邻副本的时间差值和数据差值,以及当前时刻和最近副本的时间差值;
模型处理模型,用于将所有时间差值和数据差值,输入至预设的差值模型,输出当前时刻和最近副本的数据差值预测结果;
时效判断模块,用于若所述预测结果小于预设阈值,则判断所述最近副本具备时效性;
其中,所述差值模型,根据具有时效性的两两相邻的k个时间差值和数据差值样本,进行训练后得到。
7.根据权利要求6所述的多副本数据的时效性判断装置,其特征在于,还包括模型训练模块,用于所述将所有时间差值,和待检测数据差值以外的所有数据差值,输入至预设的差值模型之前:
获取n+1个时间相互邻近的有时效性的数据副本,并计算每两个相邻时刻的时间差值和数据差值;
将每k个相邻的时间差值和数据差值作为一个训练样本,得到n-k+1个训练样本,利用n-k+1个训练样本对建立的差值模型进行训练,得到所述预设的差值模型。
8.根据权利要求6所述的多副本数据的时效性判断装置,其特征在于,模型训练模块具体用于:
对于任意一个长度为k的样本,将时间较早的k-1个数据差值和k个时间差值,输入至建立的差值模型,得到最近的数据差值的预计值;
根据最近的数据差值和所述预计值,对所述差值模型进行更新。
9.一种电子设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,其特征在于,所述处理器执行所述程序时实现如权利要求1至5任一项所述多副本数据的时效性判断方法的步骤。
10.一种非暂态计算机可读存储介质,其上存储有计算机程序,其特征在于,该计算机程序被处理器执行时实现如权利要求1至5任一项所述多副本数据的时效性判断方法的步骤。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于清华大学,未经清华大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201911303750.5/1.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置