[发明专利]移动通信网络测量分析系统及方法

权利要求书

1.移动通信系统测量数据分析系统，其特征在于，部署在HADOOP集群平台上，包括与OMC-R服务器连接的监控及下载模块，用于在监控到OMC-R服务器上生成了新的MR原始数据文件后，自动下载最新的MR原始数据文件；

数据入库及分析模块，与监控及下载模块相连，用于在下载MR数据后，立即对MR原始数据进行基于HADOOP集群平台的MR数据入库进程；

以及，用于在MR数据入库的同时，进行基于HADOOP集群平台应用的移动通信网络测量数据分析。

2.根据权利要求1所述的移动通信系统测量数据分析系统，其特征在于：所述监控及下载模块，用于下载OMC-R服务器上生成的新的MR原始数据文件，将下载的MR原始数据平均分布到每个独立的磁盘上，实现方式为，设HADOOP集群平台由n台主机组成，每台主机有M块独立的磁盘，则MR原始数据文件平均分配为n×M份。

3.根据权利要求2所述的移动通信系统测量数据分析系统，其特征在于：所述数据入库及分析模块内设有任务分解及合并模块，用于在集群内的每台主机上，启动M个运算任务，共启动n×M个运算进程，对MR数据进行如下处理，

a )解压缩，包括通过n×M个运算进程，分别将相应分配的原始文件，解压缩为原始的xml文件；

b)文件解析，包括通过n×M个运算进程，分别将原始的xml文件转换为txt文件；

c )各进程解析完成后进行合并；

d )将合并生成的文件存储于HADOOP HDFS 文件系统；

还设有数据库模块和入库模块，入库模块用于在HADOOP集群平台上，启动入库进程，使用标准的JDBC将任务分解及合并模块合并生成的文件中的数据输入到数据库模块中。

4.根据权利要求3所述的移动通信系统测量数据分析系统，其特征在于：所述数据入库及分析模块内还设有分析模块，用于对任务分解及合并模块合并生成的文件执行基于HADOOP集群平台应用的移动通信网络测量数据分析，并将分析结果输入到数据库模块内。

5.根据权利要求1-4所述的任意一种移动通信系统测量数据分析系统，其特征在于：还包括第二分析模块与所述数据库模块相连，用于在一个时间段后，基于该时间段内所有入库的数据进行分析操作，以验证最新一次下载原始数据所得的分析结果，如果两次结果不一致，则在数据库模块中保留第二分析模块得到的分析结果。

6.移动通信系统测量数据分析方法，其特征在于，包括以下步骤：

1）HADOOP集群平台实时监测 OMC-R服务器上 MR原始数据文件的更新情况，如果OMC-R服务器生成了新的MR原始数据文件则将该MR原始数据文件下载至HADOOP平台上的HADOOP HDFS 文件系统内；

2）下载MR数据后，立即对MR原始数据进行基于HADOOP集群平台的MR数据入库进程；

在MR数据入库的同时，进行基于HADOOP集群平台应用的移动通信网络测量数据分析。

7.根据权利要求6所述的移动通信系统测量数据分析方法，其特征在于：

步骤1）中将MR原始数据文件下载至HADOOP平台上的HADOOP HDFS 文件系统内的步骤，包括：在HADOOP集群平台上，将MR数据平均分布到每个独立的磁盘上，实现方式为，设HADOOP集群平台由n台主机组成，每台主机有M块独立的磁盘，则MR原始数据文件平均分配为n×M份。

8.根据权利要求7所述的移动通信系统测量数据分析方法，其特征在于，其中步骤2）包括：在每台主机上，启动M个运算任务，共启动n×M个运算进程，对MR数据进行如下处理，

a )解压缩，包括通过n×M个运算进程，分别将相应分配的原始文件，解压缩为原始的xml文件；

b)文件解析，包括通过n×M个运算进程，分别将原始的xml文件转换为txt文件；

c )各进程解析完成后进行合并；

d )将合并生成的文件存储于HADOOP HDFS 文件系统；

e)在HADOOP集群平台上，启动入库进程，使用标准的JDBC将步骤d)中所得结果输出到关系型数据库中。