[发明专利]基于内存映射文件的LTE基站大数据挖掘方法及装置

说明书

一种基于内存映射文件的LTE基站大数据挖掘方法及装置，包括为所有基站创建共同的内存映射文件F1，存储当前周期原始counter信息；将原始counter按预定义数据结构M存储到F1中；在当前周期完整率统计时间点到达时，创建内存映射文件F2，将F1中原始counter数据拷贝到F2中；对F2中所有M结构进行排序，读取F2中每个M结构进行对比，将对比结果进行count计数，然后计算出当前指标的完整率。本发明使用内存映射文件处理存储于磁盘上的文件，减少对文件执行I/O操作，提高了原始counter完整率计算的效率，同时降低了平台内存的消耗、扩容难度和相应的成本。

技术领域

本发明涉及无线通信技术领域，具体是一种基于内存映射文件的大数据挖掘方法及装置，用于提高LTE(Long Term Evolution)基站原始counter(LTE基站上报的原始指标参数)完整率统计效率。

背景技术

随着计算机的广泛应用以及计算机技术的快速发展，人们利用信息技术搜集数据的能力大幅度提高，大数据存在于商业管理、政府办公、科学研究和工程开发等各个领域。面对海量的数据，如何从中有效地发现有价值的信息或知识，是一项非常艰巨的任务。数据挖掘就是从大量的数据中提取人们感兴趣的知识，这些知识是隐含的、事先未知的潜在有用的信息。

现有的数据挖掘技术需要计算机拥有较大的存储和运算能力，甚至需要用到云计算、人工智能等相关科学领域的知识，这些技术方法虽然能够在一定程度上提高数据挖掘的效率，但是往往导致系统资源的极大浪费，增加了工程部署的成本。尤其是LTE(LongTerm Evolution)基站原始counter，数据量大，难以实现挖掘。

发明内容

针对以上所述缺陷，本发明提供了一种基于内存映射文件的大数据挖掘方法及装置，以提高原始counter完整率统计效率，并降低统计时延和系统内存消耗，节约系统资源，降低工程部署成本，保证LTE基站网管的服务质量。

本发明技术方案提供.一种基于内存映射文件的LTE基站大数据挖掘方法，包括以下步骤，

步骤一、在LTE基站网管启动时，为所有基站创建共同的内存映射文件F1，F1用来存储当前周期LTE基站设备上报的原始counter信息；

步骤二、在收到基站上报的原始counter时，将原始counter的相关信息按预定义的数据结构M存储到内存映射文件F1中，预定义的数据结构M中存储的信息包括基站编号、小区编号、原始counter的ID以及原始counter的取值，每一台基站的每一个小区的每一个原始counter都存在一个M结构；

步骤三、在当前周期完整率统计的时间点到达时，创建内存映射文件F2，将F1中的原始counter数据拷贝到内存映射文件F2中，对F2中的每个原始counter进行完整率统计；清空内存映射文件F1中的数据，F1用于存储下一周期基站设备上报的原始counter信息；

步骤四、对内存映射文件F2中所有的M结构进行排序，先按基站编号从小到大排序，再按小区编号从小到大排序，最后按原始counter的ID从小到大进行排序：

步骤五、读取内存映射文件F2中的每个M结构，对比其是否为期望收到的原始counter数据，将对比结果进行count计数，然后根据原始counter完整率计算的公式计算出当前指标的完整率，将计算结果存入数据库中。

而且，步骤五的实现方式如下，

设置标志位Flag，令Flag＝false，用于标识当前的内存映射文件中是否仍然存在原始counter信息，

读取内存映射文件中的第一个M结构，将该M结构命名为r，Flag＝true；