[发明专利]一种基于大数据平台的端到端业务质量优化装置及方法

摘要

本发明公开了一种基于大数据平台的端到端业务质量优化装置及方法，涉及大数据通信技术领域。该装置的DPI系统，用于利用探针捕获通信信令，对异常ICMP包进行预处理；并经过ETL操作后，将通信信令分发至Kafka集群；Kafka集群，用于对通信信令进行指标计算并存储；Spark大数据平台，用于从Kafka集群获取信息，判断是否有异常，将有异常的通信信道作为需要优化的信道发送至Redis集群；Redis集群，用于将信息持久化至HBase数据库；告警单元，用于监控Redis集群，一旦监控到性能劣化告警事件，则通知基站和终端通过功率控制和复杂信道编码来提高信道质量。本发明能从减少时延、提高信道质量等多方面实现对端到端业务质量的优化。

主权项

1.一种基于大数据平台的端到端业务质量优化装置，其特征在于：该装置包括设于每条通信信道上的DPI系统、Kafka集群、Spark大数据平台、Redis集群、HBase数据库以及设于基站交换中心的告警单元；所述DPI系统基于Spark大数据平台，用于：利用探针捕获各条通信信道上的通信信令；对通信信令产生的异常ICMP包进行预处理；并经过ETL操作后，将处理后的通信信令分发至Kafka集群；所述DPI系统经过必要的ETL操作，具体包括以下流程：对原始通信信令进行XDR字段的精简；并提取该通信信令对应的用户唯一标识；所述Kafka集群作为消息中间件集群，用于：对DPI系统发来的通信信令进行指标计算并存储；所述Spark大数据平台用于：从Kafka集群获取信息，经过逻辑处理，判断通信信道是否有延时或丢包的异常；将有异常的通信信道作为需要优化的信道，并将其信道信息发送至Redis集群；所述Redis集群用于：将收到的信道信息持久化至HBase数据库；所述HBase数据库用于：存储Redis集群进行持久化的信道信息；所述告警单元用于：通过毫秒级的心跳方式来监控Redis集群，一旦监控到性能劣化告警事件，则通知基站和终端通过功率控制和复杂信道编码来提高信道质量。