[发明专利]一种衰减数据处理方法、装置、电子设备及存储介质

说明书

本申请实施例提供了一种衰减数据处理方法、装置、电子设备及存储介质，方法包括：确定第一数据库中的目标数据；检测目标数据是否符合衰减条件，衰减条件包括数据的时效性阈值、数据项集合之间的关联条件以及数据的关键数据项中的一项或多项；若目标数据不符合衰减条件，则确定第一数据库中目标数据为非衰减数据；若目标数据符合衰减条件，则确定第一数据库中目标数据为衰减数据。采用该技术方案，能够解决衰减数据排除所带来的人力资源与计算机软硬件资源的浪费的问题。

技术领域

本申请涉及数据处理技术领域，特别是涉及一种衰减数据处理方法、装置、电子设备及存储介质。

背景技术

在数据的整个生命周期中，由于数据的时效性、可关联性、完整性会随时间发生变化，导致数据在某些应用场景下不再有价值，即出现数据衰减。在进入上述应用场景前需要排除掉这些衰减的数据，以保证应用输出的准确性，减少设备存储、计算和网络传输的压力。

目前，衰减数据的排除通过人工定期检查衰减数据实现，或，使用数据时设备报警发现衰减数据后，再排除衰减数据，这造成了人力资源与计算机软硬件资源的浪费。

发明内容

本申请实施例的目的在于提供一种衰减数据处理方法、装置、电子设备及存储介质，以解决衰减数据排除所带来的人力资源与计算机软硬件资源的浪费的问题。具体技术方案如下：

第一方面，本申请实施例提供了一种衰减数据处理方法，所述方法包括：

确定第一数据库中的目标数据；

检测所述目标数据是否符合衰减条件，所述衰减条件包括数据的时效性阈值、数据项集合之间的关联条件以及数据的关键数据项中的一项或多项；

若所述目标数据不符合衰减条件，则确定所述第一数据库中所述目标数据为非衰减数据；

若所述目标数据符合衰减条件，则确定所述第一数据库中所述目标数据为衰减数据。

可选的，所述方法还包括：

将所述第一数据库中的衰减数据存储至第二数据库，并从所述第一数据库中删除衰减数据；或者，

将所述第一数据库中的衰减数据存储至第二数据库，并将所述第一数据库中的非衰减数据存储至第三数据库；或者

将所述第一数据库中的非衰减数据存储至第二数据库，并从所述第一数据库中删除非衰减数据。

可选的，在确定所述目标数据为衰减数据后，还包括：

输出针对所述目标数据的衰减预警信息。

可选的，所述衰减条件包括所述目标数据的时效性阈值，所述目标数据的时效性阈值包括所述目标数据整体的时效性阈值和所述目标数据中数据项的时效性阈值；

所述检测所述目标数据是否符合衰减条件的步骤，包括：

检测当前时刻是否超过所述目标数据整体的时效性阈值，并检测当前时刻是否超过所述目标数据中每个数据项的时效性阈值；

若超过所述目标数据整体的时效性阈值，则确定所述目标数据符合衰减条件；

若未超过所述目标数据整体的时效性阈值，超过所述目标数据中全部数据项的时效性阈值，则确定所述目标数据符合衰减条件；

若未超过所述目标数据整体的时效性阈值，未超过所述目标数据中全部或部分数据项的时效性阈值，则确定所述目标数据不符合衰减条件。

可选的，所述衰减条件包括数据项集合之间的一个或多个关联条件；

所述检测所述目标数据是否符合衰减条件的步骤，包括：

检测所述目标数据是否符合所述数据项集合之间的一个或多个关联条件；