[发明专利]一种组织行为分析和结果预测大数据平台

说明书

本发明公开了一种组织行为分析和结果预测大数据平台，包括采集层、存储层、分析层和呈现层，所述采集层可以通过前端设备对网站信息等进行搜索、采集，通过采用基于Bloomfilter算法的Redis去重队列对采集数据进行去重存储处理，所述存储层采用DB数据库对去重后的采集数据进行分类存储，实现数据的分库存储管理，且可以通过SQL对DB数据库中的数据进行查询、调取，所述分析层可以对存储数据进行抽取与判研，且可以对数据进行检索判断，所述呈现层可以将组织行为数据、分析数据以及结果预测数据向政府部门、领导、企业以及专家进行呈现。该组织行为分析和结果预测大数据平台能有效关联组织行为与可能产生的结果，实用性强，预测精度高，易于推广。

技术领域

本发明涉及组织行为分析和结果预测技术领域，具体为一种组织行为分析和结果预测大数据平台。

背景技术

组织是指具有紧密联系的社会个体所构成的团体，通过组织成员间的协助和交互既组织行为，可以影响改变组织行为的动态演变结果，因此通过组织行为分析可以对组织行为结果进行预测，组织行为分析主要研究组织人员的行为和心理规律，其属于组织行为学的重要研究领域，随着社会的发展，组织行为学也越来越受人们的重视。

同时随着互联网大数据时代的来临，组织行为学的研究分析受到了很大程度的影响，因此如何利用组织行为数据结合大数据进行分析以及通过分析预测结果并采取合适的管理技术来使组织健康发展，在社会竞争中处于长期有利地位显得尤为重要，因此组织行为分析和结果预测大数据平台应运而生，但是现有的组织行为分析和结果预测大数据平台不便将组织行为与可能产生的预测结果进行关联，实用性不强，且预测精度不高，极大程度的限制了组织行为分析和结果预测大数据平台的推广与发展。

针对上述问题，急需在原有组织风险预测方法及系统的基础上进行创新设计。

发明内容

本发明的目的在于提供一种组织行为分析和结果预测大数据平台，以解决上述背景技术中提出的不便将组织行为与可能产生的预测结果进行关联，实用性不强，且预测精度不高，极大程度的限制了组织行为分析和结果预测大数据平台的推广与发展的问题。

为实现上述目的，本发明提供如下技术方案：一种基于组织成员行为数据的组织风险预测系统，包括采集层、存储层、分析层和呈现层。

所述采集层可以通过前端设备对网站信息等进行搜索、采集，通过采用基于Bloomfilter算法的Redis去重队列对采集数据进行去重存储处理；

所述存储层采用DB数据库对去重后的采集数据进行分类存储，实现数据的分库存储管理，且可以通过SQL对DB数据库中的数据进行查询、调取；

所述分析层可以对存储数据进行抽取与判研，且可以对数据进行检索判断，实现对数据库中数据的抽取分析；

所述呈现层可以将组织行为数据、分析数据以及结果预测数据向政府部门、领导、企业以及专家进行呈现，进行人工分析审核或提示工作。

优选的，所述采集层采用ETCD对种子发布服务器(master)中的信息进行集群间同步，且种子发布服务器(master)中的信息采用Downloader爬虫引擎进行搜索、采集，从而可以快速的对网站信息进行搜索、整合，实现数据的充分采集。

优选的，所述Downloader爬虫引擎采集的信息通过Analyzer数据去重分析引擎进行筛选、去重，且Analyzer数据去重分析引擎去重后的数据通过基于Bloomfilter算法的Redis去重队列进行数据存储，从而可以快速的对网站信息进行搜索、去重分析，通过基于Bloomfilter算法的Redis去重队列可以利用类似位图或者位集合数据结构来存储数据，利用位数组来简洁的表示一个集合，并且能够快速的判断一个元素是不是已经存在于这个集合，从而减少数据存储内存，提高平台的数据存储量。