[发明专利]一种互联网真实质量监测方法及装置

摘要

本发明提供一种互联网真实质量监测方法及装置。所述方法包括：采集经过互联网出口的全量用户数据；将全量用户数据上传到Apache Hadoop集群架构中的Hadoop分布式文件系统HDFS；在Apache Hadoop集群构架的Mapreduce计算框架中，采用深度包检测技术DPI将全量用户数据生成为原始呼叫直接记录CDR话单；将原始呼叫直接记录CDR话单合成为重要维度字段话单；分析所述重要维度字段话单确定互联网真实质量；其中，所述全量用户数据指用户使用网络时产生的数据流。所述装置包括：数据采集模块、数据上传模块、原始呼叫直接记录CDR话单生成模块、重要维度字段话单生成模块、互联网真实质量获取模块。所述方法及装置能够对互联网真实质量进行分析和监测。

主权项

1.一种互联网真实质量监测方法，其特征在于，包括如下步骤：采集经过互联网出口的全量用户数据；将所述全量用户数据上传到Apache Hadoop集群架构中的Hadoop分布式文件系统HDFS；在Apache Hadoop集群构架的Mapreduce计算框架中，采用深度包检测技术DPI将所述全量用户数据生成为原始呼叫直接记录CDR话单；将所述原始呼叫直接记录CDR话单合成为重要维度字段话单；分析所述重要维度字段话单确定互联网真实质量；其中，所述全量用户数据指用户使用网络时产生的数据流；将所述原始呼叫直接记录CDR话单合成为重要维度字段话单的步骤包括：从所述全量用户数据中提取重要维度字段的数据；将所述重要维度字段的数据合成业务话单；所述重要维度字段至少包括连接时长、时延、速率、成功率；所述连接时长为报文接收时间减去报文开始时间；所述时延为连接三次握手成功的时间至接收到第一个get报文之间的时间差；所述速率为单位时间的网络流量；所述成功率为根据IP报文返回码所获知的识别成功次数占总次数的比例；所述全量用户数据包括网络监控设备发出的流记录帧Flow Record Frame；所述采集经过互联网出口的全量用户数据的步骤具体包括：通过采集服务器接收网络监控设备发出的流记录帧Flow Record Frame；所述重要维度字段话单包括http业务话单；采用深度包检测技术DPI将所述全量用户数据生成为原始呼叫直接记录CDR话单的步骤具体包括：将所述流记录帧Flow Record Frame和http报文分别转换为Rawflow文件和http记录文件；将所述Rawflow文件和http记录文件进行精简和预处理；将精简和预处理后的Rawflow文件和http记录文件上传到Hadoop集群架构中的Hadoop分布式文件系统HDFS。