[发明专利]一种电力营销数据完整性检测和自动归档方法

说明书

本发明提供一种电力营销数据完整性检测和自动归档方法及系统，属于数据处理技术领域，具体包括：获取不同用户的电力营销历史数据，并将存在完整性缺陷的电力营销历史数据作为缺陷营销数据，获取缺陷营销数据的采集终端，并基于采集终端的型号、采集终端的缺陷营销数据的数据量、采集终端的通信方式进行问题采集终端的筛选，并当用户的采集终端不为问题采集终端时，基于用户的负荷量以及负荷量的变动情况，并结合用户的缺陷概率确定获取频率，并基于获取频率对电力营销数据进行获取，并基于预设频率对用户的电力营销数据进行完整性检测，并基于完整性检测的检测结果进行自动归档，从而保证了电力营销数据的完整性以及检测的效率。

技术领域

本发明属于数据处理技术领域，尤其涉及一种电力营销数据完整性检测和自动归档方法。

背景技术

为了实现对电力营销数据的完整性检测和校验，在发明专利CN107145586B《一种基于电力营销数据的标签产出方法和装置》中通过清理电力营销数据中不完整数据、异常数据和重复数据；根据清理后的电力营销数据产出标签，还可以进一步实现用户画像的生成，减少了数据规模，提高了数据价值密度，但是却存在以下问题：

未考虑结合电力营销数据的采集设备的差异性进行完整性校验的频率的确定，对于不同用户的电力营销数据，不同的采集设备在上传数据时由于采集设备以及采集设备的问题，其存在完整性缺陷的可能性也不相同，因此若不能结合上述因素，则有可能导致无法准确及时的进行电力营销数据的完整性检测。

针对上述技术问题，本发明提供了一种电力营销数据完整性检测和自动归档方法。

发明内容

为实现本发明目的，本发明采用如下技术方案：

根据本发明的一个方面，提供了一种电力营销数据完整性检测和自动归档方法。

一种电力营销数据完整性检测和自动归档方法，其特征在于，具体包括：

S11获取不同用户的电力营销历史数据，并将存在完整性缺陷的电力营销历史数据作为缺陷营销数据，并基于所述缺陷营销数据的数据量、缺陷营销数据的时间段以及不同时间段的缺陷营销数据的数据量确定所述用户的缺陷概率，并基于所述缺陷概率确定是否采用第一设定频率对所述用户的电力营销数据进行获取，若是，则将第一设定频率作为所述用户的电力营销数据的获取频率，并进入步骤S14，若否，则进入步骤S12；

S12获取所述缺陷营销数据的采集终端，并基于采集终端的型号、采集终端的缺陷营销数据的数据量、采集终端的通信方式进行问题采集终端的筛选，并判断所述用户的采集终端是否为问题采集终端，若是，则将所述用户的电力营销数据的获取频率设置为第一设定频率，并进入步骤S14，若否，则进入步骤S13；

S13基于所述用户的负荷量以及负荷量的变动情况，并结合所述用户的缺陷概率确定所述用户的电力营销数据的获取频率的确定；

S14基于所述用户的电力营销数据的获取频率对所述用户的电力营销数据进行获取，并基于预设频率对所述用户的电力营销数据进行完整性检测，并基于所述完整性检测的检测结果进行自动归档。

通过基于所述缺陷营销数据的数据量、缺陷营销数据的时间段以及不同时间段的缺陷营销数据的数据量确定所述用户的缺陷概率，从而实现了从历史缺陷情况的角度对用户的缺陷概率的确定，实现了对不同的用户的检测频率的差异性设置，并同时考虑到了不同的时间段内的缺陷营销数据的情况，进一步保证了检测的针对性。

通过基于采集终端的型号、采集终端的缺陷营销数据的数据量、采集终端的通信方式进行问题采集终端的筛选，从而实现了从问题采集终端的角度对采集频率的确定，不仅保证了缺陷营销数据的用户的检测的针对性和时效性，同时也保证了尚未出现缺陷营销数据的用户的检测的针对性。