[发明专利]物联网大数据快速校验方法

说明书

技术领域

本发明涉及数据校验技术领域，尤其涉及一种物联网大数据快速校验方法。

背景技术

在物联网高速发展的时代，随着视频监控等设备的普及和互联网接入，大数据性特征愈加明显，而大数据校验方法是用于对大数据进行校验的方法。

申请号为201310066481.1的专利文件公开了物联网大数据快速校验方法，用于提供一种利用多线程处理技术对大数据文件进行并行分块验证，并将验证信息保存至结构化数据文件中，连同块文件一同上传到服务器端保存；下载时启用多线程并发下载块文件,并多线程并发验证块文件的正确性；新的文件验证模式会将文件验证速度大大提高，有效提高物联网大文件验证速度；层次清晰，通用性较好，适用范围广，文件验证快速可靠，有效解决了物联网大数据处理中的大文件验证速度瓶颈问题，提升分布式文件系统的整体性能的物联网大数据快速校验方法，但是，其不能够将数据根据重要性进行分类，也不能够对不同重要性的数据以不同的校验方式进行校验，导致浪费资源，也容易降低校验质量。

发明内容

基于背景技术存在的技术问题，本发明提出了物联网大数据快速校验方法。

本发明提出的物联网大数据快速校验方法，包括以下步骤：

S1：设定初等校验方式、中等校验方式和多种高等校验方式，对多种高等校验方式进行分类，得出分类结果；

S2：对数据进行识别，根据识别结果剔除数据中的无用数据，然后用初等校验方式对无用数据进行校验；

S3：对剔除无用数据后的数据进行识别，根据识别结果将剔除无用数据后的数据分成关键数据和普通数据，然后用中等校验方式对普通数据进行校验；

S4：对关键数据进行识别，根据识别结果和分类结果对关键数据进行分类，然后用多种高等校验方式分别对分类后的关键数据进行校验。

优选地，所述S1中，初等校验方式、中等校验方式和高等校验方式的校验时间依次递增，且初等校验方式、中等校验方式和高等校验方式的校验精细度依次递增。

优选地，所述S1中，设计分类算法，根据分类算法对多种高等校验方式进行分类，得出分类结果。

优选地，所述S2中，设计初等识别算法，根据初等识别算法对数据进行识别。

优选地，所述S3中，设计中等识别算法，根据中等识别算法对剔除无用数据后的数据进行识别。

优选地，所述S4中，设计高等识别算法，根据高等识别算法对关键数据进行识别。

优选地，所述S4中，设计高等识别算法，根据高等识别算法对关键数据进行识别，然后根据识别结果和分类算法对关键数据进行分类。

本发明中，所述物联网大数据快速校验方法通过对数据进行识别、对剔除无用数据后的数据进行识别和对关键数据进行识别能够将数据根据重要性进行分类，通过初等校验方式、中等校验方式和多种高等校验方式能够对不同重要性的数据以不同的校验方式进行校验，提高校验速度，且提高校验质量，避免浪费资源，通过对关键数据进行识别和用多种高等校验方式分别对分类后的关键数据进行校验能够进一步提高提高校验质量，本发明能够将数据根据重要性进行分类，也能够对不同重要性的数据以不同的校验方式进行校验，避免浪费资源，提高校验速度，且提高校验质量，方法简单，使用方便。

具体实施方式

下面结合具体实施例对本发明作进一步解说。

实施例

本实施例提出了物联网大数据快速校验方法，包括以下步骤：

S1：设定初等校验方式、中等校验方式和多种高等校验方式，对多种高等校验方式进行分类，得出分类结果；

S2：对数据进行识别，根据识别结果剔除数据中的无用数据，然后用初等校验方式对无用数据进行校验；

S3：对剔除无用数据后的数据进行识别，根据识别结果将剔除无用数据后的数据分成关键数据和普通数据，然后用中等校验方式对普通数据进行校验；

S4：对关键数据进行识别，根据识别结果和分类结果对关键数据进行分类，然后用多种高等校验方式分别对分类后的关键数据进行校验。