[发明专利]基于大数据自动化综合管理分析系统、方法、介质及设备

权利要求书

1.一种基于大数据的自动化综合管理分析的系统，其特征在于，包括：

数据前期处理模块，所述数据前期处理模块用于对大数据进行处理，获得分析数据库；

数据加密模块，所述数据加密模块用于对所述分析数据库进行加密，获得加密数据；

存储模块，所述存储模块用于对加密数据进行保存；

其中，所述分析数据库包括父数据包和子数据包，所述数据加密模块对所述父数据包和所述子数据包赋予有关联性的主密钥和子密钥，所述主密钥对应所述父数据包，若干组所述子密钥对应若干组所述子数据包，若干组所述子密钥之间具有递进式的相连性，带有所述子密钥的若干组所述子数据包呈分散式保存至所述存储模块中；及

数据搜寻模块，所述数据搜寻模块用于根据当前输入的正确的子密钥搜索下一个相关的子密钥，并可获得相应的子数据包；反之，在输入错误的子密钥时，则无法获得下一个子数据包。

2.根据权利要求1所述的一种基于大数据的自动化综合管理分析的系统，其特征在于，所述数据前期处理模块包括：

数据建模，所述数据建模包括根据应用场景建立的数据模型、挖掘数据目标、挖掘数据结果可量度的成功标准，供后期挖掘模型验证使用；

源数据分析，所述源数据分析根据数据模型提供针对源数据的探索性分析和数据质量分析功能，并提供相关报告；

算法建模，所述算法建模根据应用场景和数据模型的特点，从挖掘模型的各类算法中选择相适应的算法，建立算法模型，并设置对应参数，对相类似的几种算法模型进行模型评估，择优选择；

数据装载，所述数据装载从源数据中采集算法模型所需数据，经过清洗加工，装载到算法模型中；

模型训练评估，所述模型训练评估根据模型有效性评估的方法库，结合模型噪声处理，根据学习型模型进行自动测算，训练过程中不断参数调整，根据业务模型匹配度，完成模型训练评估；

结果发布，所述结果发布把数据挖掘结果发布到数据库或者相关文件中。

3.根据权利要求2所述的一种基于大数据的自动化综合管理分析的系统，其特征在于，所述源数据分析包括：

大数据集成，所述大数据集成包括大数据采集和大数据整合，所述大数据采集主要是通过各种技术手段将分散的海量内容数据、行为数据、从业务系统中收集出来，所述大数据整合将各种分布的、异构的数据源中的数据抽取后，进行清洗、转换，最后加载到数据仓库或数据集市中，作为数据分析处理和挖掘的基础；

大数据存储与处理，所述大数据存储与处理采用服务器及相关设备把采集到的数据存储起来，使得数据能够被高效地访问和运算；

数据治理，所述数据治理包括源数据管理、数据标准管理、数据安全管理及数据生命周期管理。

4.根据权利要求2所述的一种基于大数据的自动化综合管理分析的系统，其特征在于，所述大数据存储与处理用于集成分析数据库，所述分析数据库中的父数据包对应数据的主题和摘要，所述子数据包对应数据内容的区块，所述区块包括普通内容和重要内容，所述普通内容和重要内容分别加入密钥。

5.根据权利要求4所述的一种基于大数据的自动化综合管理分析的系统，其特征在于，所述数据加密模块通过密码技术对数据传输加密和存储环节加密；

在所述数据传输环节，可以通过HTTPS技术建立不同安全域间的加密传输链路，或直接对数据进行加密，以密文形式传输，保障数据传输过程安全；在所述数据存储环节，采取数据加密或硬盘加密技术方式保障数据存储安全。

6.根据权利要求5所述的一种基于大数据的自动化综合管理分析的系统，其特征在于，所述数据搜寻模块包括：

账号权限管理，所述账号权限管理用于建立统一账号权限管理的系统，对各类业务系统、数据库等账号实现统一管理；

数据安全域，所述数据安全域包括一个虚拟机集群组成，与数据库服务器通过网关连接，组织内部用户安装相应的终端软件，可以通过中转机实现对原始数据的访问和操作。