[发明专利]一种基于大数据的计算机数据分析管理系统

说明书

本发明涉及大数据分析管理领域，具体涉及一种基于大数据的计算机数据分析管理系统，包括：数据采集模块，用于根据用户录入的数据采集计划，定时运行对应的数据挖掘模型实现目标数据的采集；数据预处理模块，用于根据用户录入的数据分析规则，运行对应的数据预处理模型实现目标数据的预处理；数据分析模块，用于根据用户录入的数据分析目标，运行对应的数据分析模型实现目标数据的分析，并获取到对应的分析报表。本发明可以根据数据采集计划，自动运行对应的数据挖掘模型、数据预处理模型和数据分析模块依次完成大数据的采集、预处理和分析工作，无需人为进行计算机程序的调整，实现了大数据的连续采集和自主分析。

技术领域

本发明涉及大数据分析管理领域，具体涉及一种基于大数据的计算机数据分析管理系统。

背景技术

计算机俗称电脑，是一类用于高速计算与分析的电子设备，它既可以进行大数值计算，又可以进行逻辑计算，且还具有存储记忆的功能。同时它也能按照程序来自动运行，以对获取的海量数据进行快速处理。

目前，传统的计算机数据分析系统对数据的处理仅仅停留在各自割裂的、独立的、简易的图表与简单列示查询的方式，这些数据还没有很好的呈现为可视化的关联，关键数据的提取与关联仍然需要依靠人工进行逐条甄别，同时普遍只能按照既定的程序运行进行大数据的分析，每更新一次数据分析目标，均需要人为去进行计算机程序的调整，费时费力，系统运行连续性差。

发明内容

为解决上述问题，本发明提供了一种基于大数据的计算机数据分析管理系统，可以根据数据采集计划，自动运行对应的数据挖掘模型、数据预处理模型和数据分析模块依次完成大数据的采集、预处理和分析工作，无需人为进行计算机程序的调整，实现了大数据的连续采集和自主分析，从而可以实现关键数据的提取与关联关系的直接获取。

为实现上述目的，本发明采取的技术方案为：

一种基于大数据的计算机数据分析管理系统，包括：

数据采集模块，用于根据用户录入的数据采集计划，定时运行对应的数据挖掘模型实现目标数据的采集；

数据预处理模块，用于根据用户录入的数据分析规则，运行对应的数据预处理模型实现目标数据的预处理；

数据分析模块，用于根据用户录入的数据分析目标，运行对应的数据分析模型实现目标数据的分析，并获取到对应的分析报表。

进一步地，所述数据采集模块首先根据数据采集计划内载的数据采集规则调用对应的数据挖掘模型，并实现数据挖掘模型运行时间的规划，获取数据挖掘模型运行计划表，然后基于Hadoop根据数据挖掘模型运行计划表定时运行对应的数据挖掘模型实现目标数据的采集。

进一步地，所述数据预处理模块用于实现目标数据的填充、分类、格式标准化处理。

进一步地，所述数据预处理模块采用基于深度学习的不完整大数据填充算法实现目标数据的填充处理；基于Bi-LSTM+Attention模型实现数据的分类处理，基于循环神经网络模型实现数据格式的标准化。

进一步地，所述数据分析模块首先根据用户录入的数据分析目标实现数据分析模型运行计划表的编制，然后基于Hadoop根据数据分析模型运行计划表依次运行对应的数据分析模型实现目标数据的分析处理，并调用对应的分析报表模板，实现分析报表的编制。

进一步地，还包括：

数据可视化分析模块，用于根据用户录入的数据分析目标，调用对应的驱动脚本驱动Tableau Desktop实现目标数据的可视化分析。

进一步地，还包括：

数据储存模块，用于根据用户录入的数据采集计划，调用驱动对应的数据储存脚本实现目标数据的定位储存。

进一步地，还包括：

数据分析报表定向发送模块，在对应的数据分析报表生成后启动，实现数据分析报表的定向发送。