[发明专利]多样式类型数据的JSON化处理方法

说明书

本发明公开了一种多样式类型数据的JSON化处理方法，包括步骤：S1.对多样式类型数据进行提取，得到提取后的多样式类型数据；S2.对提取后的多样式类型数据进行统计处理，得到统计后的数据；S3.判断统计后的数据是否符合数据标准，若是，则进入步骤S4，若否，则结束；S4.对统计后的数据进行二进制化处理，得到二进制化的数据；S5.对二进制化的数据进行JSON化处理，得到JSON化的数据。本发明的一种多样式类型数据的JSON化处理方法，能够快速将原始数据信息转化为易读性强、存储结构简易以及便于大数据分析的JSON化数据信息。

技术领域

本发明涉及数据处理领域，具体涉及一种多样式类型数据的JSON化处理方法。

背景技术

目前，对于原始数据的有效清理筛选工作研究受到了广泛关注，在人工智能大数据深度挖掘方向，数据清理是整体建模过程中至关重要的一环，也是保留数据信息特征，得到最终挖掘数据的重要一环。因此，对于现实世界中的大量原始无序数据进行识别筛选往往能够揭露一些以往未挖掘的重要信息，对于探究大数据背后的深层自然客观原理具有一定的意义。

在现实生活中，对原始大数据进行筛选清理是具有很高应用价值的热门研究领域之一。随着当代互联网技术的普及与信息化时代数据量爆炸式的增长，再进一步获取到真实有效的信息难度越发困难，筛选具有特定作用的信息数据也较难实现，从而海量数据中，得到真实有价值的大数据样本并从中分析出所需内容已经成为制约经济发展的瓶颈之一。

发明内容

有鉴于此，本发明的目的是克服现有技术中的缺陷，提供多样式类型数据的JSON化处理方法，能够快速将原始数据信息转化为易读性强、存储结构简易以及便于大数据分析的JSON化数据信息。

本发明的多样式类型数据的JSON化处理方法，包括如下步骤：

S1.对多样式类型数据进行提取，得到提取后的多样式类型数据；

S2.对提取后的多样式类型数据进行统计处理，得到统计后的数据；

S3.判断统计后的数据是否符合数据标准，若是，则进入步骤S4，若否，则结束；

S4.对统计后的数据进行二进制化处理，得到二进制化的数据；

S5.对二进制化的数据进行JSON化处理，得到JSON化的数据。

进一步，所述步骤S1，具体包括：

S11.对多样式类型数据进行分类，得到非数字字段数据以及数字字段数据；

S12.提取包含目标关键词的非数字字段数据，并将包含目标关键词的非数字字段数据作为有效的非数字字段数据；

S13.提取在目标数值区间内的数字字段数据，并将数值在目标数值区间内的数字字段数据作为有效的数字字段数据；

S14.将有效的非数字字段数据以及有效的数字字段数据作为提取后的多样式类型数据。

进一步，所述步骤S2中，对提取后的多样式类型数据进行统计处理，具体包括：统计所述提取后的多样式类型数据的缺失率、重复率以及失真率。

进一步，所述步骤S3中，判断统计后的数据是否符合数据标准，具体包括：判断统计后的数据的缺失率是否小于设定的缺失率、判断统计后的数据的重复率是否小于设定的重复率以及判断统计后的数据的失真率是否小于设定的失真率，若是，则符合数据标准，若否，则不符合数据标准。

进一步，所述步骤S4中，具体包括：

S41.对统计后的数据中的非数字字段数据进行UTF-8编码处理，得到十进制的数字字段数据；

S42.将所述十进制的数字字段数据与统计后的数据中的数字字段数据进行二进制化处理，得到二进制化的数据。