[发明专利]移动式现场大数据分析平台

说明书

本发明公开了移动式现场大数据分析平台，属于大数据分析技术领域，包括数据搜索模块、数据源数据抓取模块、数据收集存储模块、数据分析模块、数据存储云端、数据转换模块、数据显示模块以及数据选择模块，其中，所述数据搜索模块与数据源数据抓取模块通信连接，所述数据收集存储模块与数据源数据抓取模块、数据分析模块通信连接；本发明通过删除数据中存在的垃圾信息，方便使用者查看数据，保护网络环境，将数据按找时间从新到旧进行排序，方便工作人员查询最新数据，节省工作人员的查询时间，提高工作效率。

技术领域

本发明涉及大数据分析技术领域，尤其涉及移动式现场大数据分析平台。

背景技术

大数据分析是指对规模巨大的数据进行分析，大数据可以概括为5个V，数据量大(Volume)、速度快(Velocity)、类型多(Variety)、价值(Value)以及真实性(Veracity)，大数据作为时下最火热的IT行业的词汇，随之而来的数据仓库、数据安全、数据分析、数据挖掘等等围绕大数据的商业价值的利用逐渐成为行业人士争相追捧的利润焦点，随着大数据时代的来临，大数据分析也应运而生，高效的数据和分析能力将确保最佳的欺诈预防水平，提升整个企业机构的安全，，以便企业快速检测并预测欺诈活动，同时识别和跟踪肇事者；因此，发明出移动式现场大数据分析平台变得尤为重要；

经检索，中国专利号CN109086396A公开了养老大数据分析平台，该发明虽然可以实时的用多种可视化的方式展示数据变化情况，但无法对多余信息进行过滤处理，影响使用者查看数据，危害网络环境，其次，现有的移动式现场大数据分析平台无法对数据按照时间前后进行有序排序，工作人员查找数据是常常会查询到过于老旧的数据，浪费工作人员的查询时间，降低工作效率，为此，我们提出了移动式现场大数据分析平台。

发明内容

本发明的目的是为了解决现有技术中存在的缺陷，而提出的移动式现场大数据分析平台。

为了实现上述目的，本发明采用了如下技术方案：

移动式现场大数据分析平台，包括数据搜索模块、数据源数据抓取模块、数据收集存储模块、数据分析模块、数据存储云端、数据转换模块、数据显示模块以及数据选择模块；

其中，所述数据搜索模块与数据源数据抓取模块通信连接，所述数据收集存储模块与数据源数据抓取模块、数据分析模块通信连接，所述数据分析模块与数据存储云端、数据转换模块通信连接，所述数据显示模块与数据转换模块、数据选择模块通信连接；

所述数据搜索模块包括数据输入模块以及查询信息处理模块；

所述数据收集存储模块包括数据收集单元、数据分类单元以及数据存储单元；

所述数据分析模块包括数据分析单元与文件转换单元。

进一步地，所述数据输入单元用于使用者输入与所需查询数据对应的关键字并通过数据转换生成搜索数据，所述查询信息处理单元用于接收搜索信息并对其进行判断分析处理生成查找数据，其具体判断分析步骤如下：

步骤一：若查找数据符合数据查找规范，则将其处理生成查找数据；

步骤二：若查找数据不符合数据查找规范，则将反馈用户数据查询格式错误。

进一步地，所述数据源数据抓取模块用于接收查找数据并开始从不同数据源上抓取数据将其处理生成初始数据，其中，不同数据源包括ODBC、C3P0以及DBCP。

进一步地，所述数据收集单元用于接收初始数据并按照数据字典的定义转换成筛选数据，数据分类单元用于接收筛选数据并及进行分类清洗处理生成模板数据，其具体分类清洗步骤如下：

步骤(1)：将筛选数据按照不同类型进行分类处理，其中不同类型包括文章、视频以及垃圾广告，同时将分类完成的筛选数据分别标记为A、B、C；