[发明专利]基于通信领域大数据的用户数据分析系统及方法

说明书

本申请公开了一种基于通信领域大数据的用户数据分析系统，数据汇聚组件，用于从移动网络核心网的其他网元采集移动用户的数据，将采集的用户数据发送到数据处理及分析组件；数据处理及分析组件，用于根据预先设置的用户数据分析模型，对来自数据汇聚组件的相应种类的用户数据进行分析，将分析结果送入数据存储组件中存储；数据服务组件用于根据增值业务平台的数据分析要求，从数据存储组件中提取所需的分析结果，并将所述分析结果推送给增值业务平台和APP客户端；数据存储组件用于存储采集到的用户数据及分析结果。本申请还公开了一种基于通信领域大数据的用户数据分析方法。

技术领域

本申请涉及大数据分析技术领域，尤其涉及基于通信领域大数据的用户数据分析系统及方法。

背景技术

随着我国移动通信事业的快速发展，通信领域拥有多年的数据积累，拥有诸如用户基础信息、套餐信息、终端信息、位置信息、业务发展量等数据。从数据来源看，通信数据来自于涉及移动语音、固定电话、固网接入和无线上网等所有业务，也会涉及公众集团客户、政企客户和家庭客户。通过挖掘通信领域大数据，发现电信用户数据价值，可以实现从用户需求洞察、目标用户发现、到营销策略制定的全营销流程贯通，帮助电信运营商提高业务创新能力，从而更好地服务用户以支持运营主业，并在创新方向上重新把握数据产业链的主导权，提升经营效率，开创了新的数据营销模式。因此，数据挖掘、数据分析已经成为电信运营商的新商业运营模式。

现有技术中，针对大数据处理方法主要集中在如下几种：

1、基于分布式系统基础架构(Hadoop)平台的电信运营商海量数据处理方法

通过使用开源数据转换工具(Sqoop)将原始数据系统数据抽取到Hadoop本地服务器上；然后在数据仓库工具(Hive)中建表并根据运营商数据仓库的数据模型和业务需求编写Hive脚本；接着执行Hive脚本将源数据转换后装载到Hive的目标表中；最后根据需求编写Hive查询语句或者数据并行处理工具(MapReduce)程序对目标表中的数据进行查询分析。

2、基于网络图模型的处理用户信息方法

通过设有用于完成关键信息抽取的数据分析和提取模块；用于对关键信息进行预处理的数据预处理模块；用于将预处理后的数据抽象为网络图模型的网络构建模块；用于对网络图模型进行划分并进一步分析运算的运算发现模块；用于输出发现结果的结果输出模块。该方法能够通过快速的处理个体之间的通信数据，完成某一潜在团体的分类、划定和输出。

3、基于大数据量号码过滤方法

通过准备待过滤数据的同时对其进行标识，按照标识指定的过滤顺序，对待过滤数据进行逐项过滤，按照标识指定的过滤项类型，将数据项与过滤器类相对应，当过滤条件不满足时，挂起过滤任务直至过滤条件满足。

4、基于数据信息通信网络中实现用户流失预测的系统及方法

通过数据采集提取模块、数据分析模块、数据建模模块和预测模块，数据采集提取模块采集数据信息通信网络的用户数据并提取用户体验原始数据，数据分析模块生成用户体验指标数据，数据建模模块建立预测模型，预测模块将用户体验指标数据输入预测模型并根据预测结果判断该用户是否为可能流失的用户。

以上方法均存在相应缺陷，具体列举如下：

对于Hadoop平台的电信运营商海量数据处理方法，主要描述通过Hadoop架构的各个Sqoop工具、Hive、MapReduce组件处理数据的具体步骤，更多的是描述Hive对于数据表的处理过程，对于具体数据源和数据分析应用场景没有详细描述。

通过网络图模型的处理用户信息方法，将用户信息进行网络图模型处理的方式，通过网络图模型的计算函数公式进行用户评估和定位，更多的讲述计算函数的定义，对于用户团体如何快速提取和输出没有描述。