[发明专利]一种基于多源异构数据处理的工业大数据分析系统

权利要求书

1.一种基于多源异构数据处理的工业大数据分析系统，其特征在于，包括：

数据采集模块，用以采集工业生产的数据信息；

数据加密模块，其与所述数据采集模块相连，用以将采集的数据信息进行加密传输；

数据接收模块，其与所述数据加密模块相连，用以接收经过加密的数据信息，数据接收模块包括用以对接收的数据进行清洗的数据清洗单元和用以对清洗后的数据进行分类的数据分类单元；

数据存储模块，其与所述数据接收模块相连，用以存储经过数据接收模块处理的数据信息；

数据分析模块，其与所述数据存储模块相连，用以构建人工智能模型对数据存储模块存储的数据信息进行分析以得到工业生产过程中的预警预测信息、问题信息以及生产能力信息；

所述数据分析模块在进行数据分析时，所述数据清洗单元获取工业数据信息、将数据信息数量记为Wi并将第i条数据信息字符长度记为Li，其中，i为正整数，所述数据清洗单元预设有标准数据信息字符长度L，在进行数据清洗时，所述数据清洗单元依次将各条数据信息长度与标准数据信息字符长度L作比对并根据比对结果删除数据信息冗长的数据和数据信息简短的数据；

所述数据清洗单元还设置有标准关键词字符长度N0，在依次对各条数据信息进行数据清洗时，所述数据清洗单元将第i条数据信息字符长度Li与标准关键词字符长度N0作比对，若Li＜N0，所述数据清洗单元判定该条数据信息内不含有关键词信息，若Li≥N0，所述数据清洗单元判定该条数据信息内含有关键词信息，比对完成后，所述数据清理单元删除不含有关键词的数据信息。

2.根据权利要求1所述的基于多源异构数据处理的工业大数据分析系统，其特征在于，所述数据清洗单元预设有标准数据信息字符长度L，包括，第一标准数据信息字符长度L1和第二标准数据信息字符长度L2，在进行数据清洗时，所述数据清洗单元将每条数据信息字符长度Li与标准数据信息字符长度L作比对，其中L1＜L2；

当Li＜L1时，所述数据清洗单元判定该数据信息字符长度简短并对该数据信息进行删除；

当L1≤Li≤L2时，所述数据清洗单元判定该数据信息长度符合标准；

当Li＞L2时，所述数据清洗单元判定该数据信息长度冗长并对该数据信息进行删除；

所述数据清洗单元将处理后的数据信息记为第一处理数据信息。

3.根据权利要求1所述的基于多源异构数据处理的工业大数据分析系统，其特征在于，当所述数据清洗单元判定关键词信息且Li＞N0时，所述数据清洗单元对数据信息内的关键词进行判定，从数据信息Wi中的第1个字符开始，选择n个字符，将n个字符与标准关键词字符作比对，若n个字符与标准关键词字符的缺失度大于10%时，所述数据清洗单元判定该数据信息中不含有关键词并进行进一步判断，若n个字符与标准关键词字符的缺失度小于等于100%时，所述数据清洗单元判定该数据信息含有关键词；

从数据信息Wi中的第2个字符开始，选择n个字符，将n个字符与标准关键词字符作比对，若n个字符与标准关键词字符的缺失度大于10%，所述数据清洗单元判定该数据信息中不含有关键词并进行进一步判断，若n个字符与标准关键词字符的缺失度小于等于10%，所述数据清洗单元判定该数据信息含有关键词；

从数据信息Wi中的第k个字符开始，选择n个字符，将n个字符与标准关键词字符作比对，若n个字符与标准关键词字符的缺失度大于10%时，所述数据清洗单元判定该数据信息中不含有关键词并进行进一步判断，若n个字符与标准关键词字符的缺失度小于等于10%时，所述数据清洗单元判定该数据信息含有关键词，其中k＜n。