[发明专利]基于HADOOP平台的LTE网络MR数据分析方法

摘要

本发明提供一种基于HADOOP平台的LTE网络MR数据分析方法，包括将MR数据的原始压缩文件采集到HADOOP运算平台本地；在HADOOP平台上，将MR数据平均分布到每个独立的磁盘上，启动n×M个运算进程，对MR数据进行解压缩和文件解析，完成后进行合并存储；进行基于HADOOP平台的MR数据解析，MR网络质量分析，根据预设的单位文件数启动入库进程，输出到关系型数据库中。本发明涉及将大数据平台应用于LTE网络MR数据的分析上，通过大数据平台的分布式文件系统、任务调试管理进程，极大的提高了MR数据分析的效率，并且支持实现MR数据分析由点转为面，由单维度转换为时间+空间多维度分析。

主权项

一种基于HADOOP平台的LTE网络MR数据分析方法，其特征在于，包括以下步骤：1）将MR数据的原始压缩文件采集到HADOOP运算平台本地；2）在HADOOP平台上，将MR数据平均分布到每个独立的磁盘上，实现方式为，设MR平台由n台主机组成，每台主机有M块独立的磁盘，则MR数据的原始压缩文件平均分配为n×M份；3）在每台主机上，启动M个运算分析任务，共启动n×M个运算进程，对MR数据进行如下处理，a)解压缩，包括通过n×M个运算进程，分别将相应分配的原始压缩文件，解压缩为原始的xml文件；b)文件解析，包括通过n×M个运算进程，分别将原始的xml文件转换为txt文件；c)各进程解析完成后进行合并；d)将合并生成的文件存储于HADOOP平台；4）按照存储于HADOOP平台的文件，进行基于HADOOP平台的MR数据解析，包括搜索每个小区的各项指标，所述指标为小区Rsrp、县Rsrp/rsrq指标、地市Rsrp/rsrq指标、RSRP弱覆盖、RSRP点数、栅格邻区；5）基于HADOOP平台进行大数据应用MR网络质量分析，包括根据各项指标进行统计；6）统计完成后，按照时间、区域、网元分类，将统计结果输出到HADOOP HDFS 文件系统；7）在HADOOP平台上，按照时间、区域、网元，根据预设的单位文件数，启动入库进程，使用标准的JDBC将步骤6)中所得结果输出到关系型数据库中；8）MR数据分析过程完成。