[发明专利]一种大数据分析系统

说明书

技术领域

本发明属于大数据分析技术领域，特别是涉及一种大数据分析系统。

背景技术

近年来，互联网的发展越来越迅速，使用互联网的人也越来越普及，人们在使用互联网进行日常的活动的时候，例如网购，查看节目，信息，商品都会产生大量的数据，而这些数据对于电子商务网站或者互联网媒体类网站来说是非常宝贵的，利用这些大数据的处理分析能得到非常宝贵的商业价值。

大数据广泛应用于互联网各项应用中，对网站的价值意义重大，通过海量数据分析和云计算的实现，可以最大化帮助互联网媒体类网站广告系统和电子商务类网站大数据商品推送系统得到最大化的提升。互联网媒体类网站大数据广告根据用户阅读偏好推送，针对海量数据的云计算，通过各种广告形式推送到网站浏览用户，例如应用在商会网；电子商务类网站大数据商品推送给在线购买者，通过分析用户点击行为、购买行为、产品相关性、偏好及使用时间规律推送相应的商品及促销信息，例如应用在品得商城。

大数据的出现，正在引发全球范围内深刻的技术与商业变革。在技术上，大数据使从数据当中提取信息的常规方式发生了变化。在搜索引擎和在线广告中发挥重要作用的机器学习，被认为是大数据发挥真正价值的领域。在海量的数据中统计分析出人的行为、习惯等方式，最大程度帮助广告主找到精准潜在客户，从而提升广告效果和后续购买操作。

2016年，我国大数据产业保持高速发展态势，各级政府和企业大力推进，技术创新取得明显突破，大数据应用推进势头良好，产业体系初具雏形，支撑能力日益增强。展望2017年，大数据产业发展将迎来“黄金期”，产业集聚将进一步特色化发展，创新驱动仍将是产业发展主基调，大数据融合应用进程加速，为做大做强数字经济、带动传统产业转型升级提供新动力。

云计算是一种基于互联网的超级计算方式，是对并行处理、分布式处理和网格计算的延伸。可以认为，云计算不仅是一种新的计算模型，同时是一种新的共享基础架构的方式。云计算面向超大规模的分布式用户环境，其主要功能是提供快捷安全的云端数据存储和网络服务。

首先，云计算与大数据之间是相辅相成，相得益彰的关系。大数据挖掘处理需要云计算作为平台，而大数据涵盖的价值和规律则能够使云计算更好的与行业应用结合并发挥更大的作用。云计算将计算资源作为服务支撑大数据的挖掘，而大数据的发展趋势是对实时交互的海量数据查询、分析提供了各自需要的价值信息。

其次，云计算与大数据的结合将可能成为人类认识事物的新的工具。实践证明人类对客观世界的认识是随着技术的进步以及认识世界的工具更新而逐步深入。过去人类首先认识的是事物的表面，通过因果关系由表及里，由对个体认识进而找到共性规律。现在将云计算和大数据的结合，人们就可以利用高效、低成本的计算资源分析海量数据的相关性，快速找到共性规律，加速人们对于客观世界有关规律的认识。

第三，大数据的信息隐私保护是云计算大数据快速发展和运用的重要前提。没有信息安全也就没有云服务的安全。产业及服务要健康、快速的发展就需要得到用户的信赖，就需要科技界和产业界更加重视云计算的安全问题，更加注意大数据挖掘中的隐私保护问题。从技术层面进行深度的研发，严防和打击病毒和黑客的攻击。同时加快立法的进度，维护良好的信息服务的环境。

现有的大数据分析技术，往往是大数据的分析结果往往不具备实时性、针对性，原始数据采样精准度和统计方法的差异性，以及建模结构性错误，都会导致分析有误。此外不同的使用场景也会带来完全不同的结果。

发明内容

本发明的目的在于提供一种大数据分析系统，以根据大数据分析系统能够提升 网站的广告传播的精准度和商城商品展示的精准度。

为了达到上述目的，本发明提供了一种大数据分析系统，所述系统包括：

数据采集模块，所述数据采集模块可以根据用户以往历史浏览、购买记 录等行为进行数据采集；

计算模块，所述数据采集模块采集的数据经过计算后转化为计算机语言；

数据库，用于存储所述数据采集模块采集的数据经过所述计算模块转化的计算机语言；

操作系统，通过所述操作系统，可以调用所述数据库中存储的信息，并发送数据库中的数据至云计算；

云计算，接收待计算的数据，并进行计算处理。

优选的，所述数据采集模块采用SAS网络爬虫进行数据的采集。

优选的，所述数据采集后，并通过预设数据过滤规则对数据进行过滤，将过滤后的数据作为所述数据采集模块采集到的数据。

优选的，所述数据过滤是采用布隆过滤器，对所采集到的数据进行过滤。