[发明专利]一种大数据快速分析系统

说明书

本发明公开了一种大数据快速分析系统，属于大数据领域。本发明技术方案要点：通过数据收集模块会对用户在用户终端上的所有行为数据进行统一收集，再将数据收集模块中统一收集到的数据通过数据分类模块按照不同的指标进行分类，先实现数据的分类，直接将经过初步分类的数据存储供调用，有效节省初步从所有的无序数据中挑选调用所需数据的行为，缩短数据调用时间，在将数据通过数据输出模块传输到中央处理前之前，先通过数据对比模块将通过数据调用模块调用的分类数据与数据缓存服务器中存储的原始数据进行对比，避免数据损坏，防止调用有损数据，避免有数据调用有误造成的分析结果误差。

技术领域

本发明属于大数据领域，具体涉及一种大数据快速分析系统。

背景技术

大数据，IT行业术语，是指无法在一定时间范围内用常规软件工具进行捕捉、管理和处理的数据集合，是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力的海量、高增长率和多样化的信息资产。随着云时代的来临，大数据也吸引了越来越多的关注。分析师团队认为，大数据通常用来形容一个公司创造的大量非结构化数据和半结构化数据，这些数据在下载到关系型数据库用于分析时会花费过多时间和金钱。大数据分析常和云计算联系到一起，因为实时的大型数据集分析需要像MapReduce一样的框架来向数十、数百或甚至数千的电脑分配工作。但是目前的数据分析是基于所有的数据笼统的在一起进行分析，耗费时间。基于此本发明方案有必要设计一种大数据快速分析系统来以解决上述问题。

发明内容

本发明所要解决的技术问题：本发明的目的是提供一种大数据快速分析系统，从而解决目前的数据分析由于基于所有的数据笼统的在一起进行分析，耗费时间长的问题。

为解决上述技术问题，本发明采用如下所述的技术方案是：

一种大数据快速分析系统；包括数据收集模块、数据分类模块、数据缓存服务器、中央处理器和用户终端；所述数据收集模块的信号输出端分别与数据分类模块和数据缓存服务器的信号输入端连接，所述数据分类模块的信号输出端与数据缓存服务器的信号输入端连接，所述数据缓存服务器的信号输出端与中央处理器的信号输入端连接，中央处理的信号输出端与用户终端的信号输入端相连。

其中，所述数据分类模块中按照不同的类目将数据分为多组传输至数据缓存服务器，其中不同的数据分组存在数据重合现象。

其中，所述数据缓存服务器包括原始数据、分类数据、数据调用模块、数据对比模块和数据输出模块，所述原始数据为通过数据收集模块完成数据的收集，并将收集到的数据存储到数据缓存服务器中生成原始数据，所述分类数据未将数据收集模块收集的数据通过数据分类模块进行分类，将分类过的数据按照不同的类目再次存储到数据缓存服务器，生成分类数据，所述数据调用模块的信号输入端与分类数据的信号输出端连接，所述数据对比模块的信号输入端分别与数据调用模块和原始数据连接，所述数据对比模块的信号输出端与数据输出模块的信号输入端连接，所述数据调用模块调用分类数据，所述数据对比模块对比原始数据和数据调用信号调用的分类数据，两组数据对比完成后通过数据输出模块输出到中央处理器。

其中，所述中央处理器包括数据处理模块和数据处理记录生成模块，所述数据处理模块的信号输出端分别与数据处理记录生成模块和用户终端的信号输入端连接，所述数据处理模块接收数据输出模块输出的数据进行处理，数据处理记录生成模块将数据处理模块对输出输出模块输出的数据的处理生成记录并存储。

其中，所述用户终端包括可视化模块、用户操控模块和数据修改模块，所述用户操控模块调用经过中央处理器处理后的数据，通过可视化模块将数据以图像形式展示，所述数据修改模块在线修改中央处理器处理后的数据，并将修改后的数据存储在用户终端，生成修改记录。

其中，所述用户终端通过网络传输模块接收中央处理器输出的数据。

本发明与其他方法相比，有益技术效果是：