[发明专利]一种数据智能标引和自动化数据清洗的方法及系统

权利要求书

1.一种数据智能标引和自动化数据清洗的方法，其特征在于，包括以下具体步骤：

S1、接收数据输入请求；

S2、对接收的数据进行分段，得到多段数据；

S3、调用指令并判断调用指令为标引指令或者为清洗指令：若为标引指令，则执行S4；若为清洗指令，则执行S8；

S4、输入标引关键词并判断是否选择结束：若是，则执行S5；若否，则重新执行S4；

S5、将各标引关键词依次带入各分段数据中，将含有该标引规则的数据进行标引，执行S6；

S6、对各段标引结果依次进行整合并保存；

S7、对整合结果进行输出显示；

S8、数据预清洗：同时对各段进行清洗；

S9、将各段的清洗结果整合并进行保存；

S10、数据深度清洗：对预清洗后的整合数据进行再次清洗；

S11、对数据深度清洗后的数据进行输出显示。

2.根据权利要求1所述的一种数据智能标引和自动化数据清洗的方法，其特征在于，还包括储存库；整合的数据保存在储存库内。

3.根据权利要求2所述的一种数据智能标引和自动化数据清洗的方法，其特征在于，储存库内包含多个子储存库。

4.根据权利要求1所述的一种数据智能标引和自动化数据清洗的方法，其特征在于，所述数据智能标引和自动化数据清洗装置以配置文件或代码块的形式配置到所述工业设备上。

5.一种数据智能标引和自动化数据清洗的系统，包括权利要求1-2任一项数据智能标引和自动化数据清洗的方法，其特征在于，具体包括

下载模块，用于接收输入数据请求命令；

分组模块，用于将储存模块内的数据进行分段，便于对各段模块同时执行命令；

调用模块，用于调用指令；

判断模块，用于判断调取的命令为标引指令或者为清洗指令；

标引模块，应于在数据中找到对应标引数据并将其提取出来并进行整合；

清洗模块，用于对数据进行数据预清洗和数据深度清洗，将数据内错误、重复、缺乏一致性的数据删除，并对清洗后的数据进行整合；

显示模块，用于对标引数据进行显示或者用于对清洗后的数据进行显示。

6.根据权利要求5所述的一种数据智能标引和自动化数据清洗的系统，其特征在于，还包括储存模块；用于存储整合后的数据。

7.根据权利要求5所述的一种数据智能标引和自动化数据清洗的系统，其特征在于，储存模块内包含多个子储存模块。

8.根据权利要求5所述的一种数据智能标引和自动化数据清洗的系统，其特征在于，所述数据智能标引和自动化数据清洗装置以配置文件或代码块的形式配置到所述工业设备上。