[发明专利]一种数据通信业务质量监控的方法及大数据系统

权利要求书

1.一种数据通信业务质量监控的方法，包括：

大数据系统通过对各个网元的话单日志服务器发送的日志数据进行日志处理，得到各网元的日志处理结果和日志统计结果，所述日志处理结果和日志统计结果存储在所述大数据系统的Elasticsearch模块；

大数据系统根据所述Elasticsearch模块内存储的各网元日志处理结果和日志统计结果对该网元日志的关键性指标数据进行业务质量监控，判断所述网元日志的关键性指标数据是否存在风险；

若判断所述网元日志关键性指标数据存在风险，则大数据系统向运维人员发出数据通信业务质量的预警提示。

2.根据权利要求1所述的方法，其中，部署在每个网元的话单日志服务器中kafkaproducers模块收集所在网元的日志数据，并将其进行编码后发送到所述大数据系统的brokers模块。

3.根据权利要求2所述的方法，其中，所述brokers模块收到来自各个网元编码后的日志数据后，保存所述各网元编码后的日志数据，并启动所述大数据系统的spark streaming任务调用kafka consumer模块。

4.根据权利要求3所述的方法，其中，所述kafka consumer模块被调用后，提取所述brokers模块保存的各网元编码后的日志数据，并对所述日志数据解码后进行日志处理，得到各网元的日志处理结果和日志统计结果。

5.根据权利要求4所述的方法，其中，所述kafka consumer模块将所得到的各网元的日志处理结果和日志统计结果发送到所述大数据系统的Elasticsearch模块，同时将各网元的日志统计结果发送到所述大数据系统的分布式文件系统HDFS模块，以便需要进行各网元的离线日志统计时，读取并统计所述HDFS模块中各网元的日志统计结果，得到各网元的离线日志统计结果，并将其发送到所述Elasticsearch模块。

6.根据权利要求5所述的方法，其中，所述大数据系统的Websphere应用服务器WAS模块通过读取所述Elasticsearch模块中各网元的日志处理结果和日志统计结果，对该网元日志的关键性指标数据进行业务质量监控，判断所述网元日志的关键性指标数据是否存在风险，并在判断所述网元日志关键性指标数据存在风险时向运维人员发出数据通信业务质量的预警提示。

7.根据权利要求5所述的方法，其中，所述大数据系统的Websphere应用服务器WAS模块通过读取所述Elasticsearch模块中各网元的离线日志统计结果，对该网元日志的关键性指标数据进行业务质量监控，判断所述网元日志的关键性指标数据是否存在风险，并在判断所述网元日志关键性指标数据存在风险时向运维人员发出数据通信业务质量的预警提示。

8.一种数据通信业务质量监控的大数据系统，包括：

kafka consumer模块，用于通过对各个网元的话单日志服务器发送的日志数据进行日志处理，得到各网元的日志处理结果和日志统计结果；

Elasticsearch模块，用于存储所述日志处理结果和日志统计结果；

WAS模块，用于根据所述Elasticsearch模块内存储的各网元日志处理结果和日志统计结果对该网元日志的关键性指标数据进行业务质量监控，判断所述网元日志的关键性指标数据是否存在风险，以及当判断所述网元日志关键性指标数据存在风险，则向运维人员发出数据通信业务质量的预警提示；

其中，所述WAS是指Websphere应用服务器。

9.根据权利要求8所述的大数据系统，还包括：brokers模块，用于接收部署在每个网元的话单日志服务器中kafka producers模块收集所在网元的日志数据。

10.根据权利要求9所述的大数据系统，所述brokers模块具体用于收到来自各个网元编码后的日志数据后，保存所述各网元编码后的日志数据，并启动spark streaming任务调用kafka consumer模块。