[发明专利]一种构建运营商实时业务报表的方法

说明书

本发明涉及业务报表技术领域，且公开了一种构建运营商实时业务报表的方法，包括DB、Log、APP端、WEB端和微信端，所述DB通过信号连接有Oracle Golden Gate，所述Log通过信号连接有Logstash，所述Oracle Golden Gate通过信号连接有两个Kafka，所述Logstash与两个Kafka通过信号连接，所述Kafka通过信号连接有STORM。该构建运营商实时业务报表的方法，通过Redis、Oracle Golden Gate和Logstash的配合使用，生成实时报表，将数据复制同步并采集到接入层并按照开发者的制定的规范输出到目的地，通过Kafka、触发器和数据展示层的配合使用，达到了数据重复利用的目的，实现预测及预警通知和形成报告并实时推送相干人员，可以生成实时报表，多角度、多维度展示业务数据，通过可视化技术进行展现。

技术领域

本发明涉及业务报表技术领域，具体为一种构建运营商实时业务报表的方法。

背景技术

运营商业务平台、支撑系统中每天产生大量与用户有关的有价值数据，这些海量数据将远远超过一般互联网公司所拥有的数据量，相关数据的深度、广度及真实度更是互联网公司所无法比拟的，运营商业务报表可以从不同的维度观察数据从而对数据进行更深入的观察和分析，现有的业务报表存在业务分析报表不及时、通过数据库查询统计消耗资源量大、数据复用率低、没有预测及预警通知和无法形成报告并实时推送相干人员的问题。

发明内容

(一)解决的技术问题

针对现有技术的不足，本发明的目的在于提供了一种构建运营商实时业务报表的方法，具备实时统计分析生成实时业务报表、提高数据使用率、实时智能预警和预测、减小原始数据库资源消耗和形成实时报表报告并自动推送相关人员等优点，解决了业务分析报表不及时、通过数据库查询统计消耗资源量大、数据复用率低、没有预测及预警通知和无法形成报告并实时推送相干人员的问题。

(二)技术方案

为实现上述实时统计分析生成实时业务报表、提高数据使用率、实时智能预警和预测、减小原始数据库资源消耗和形成实时报表报告并自动推送相关人员的目的，本发明提供如下技术方案：一种构建运营商实时业务报表的方法，包括DB、Log、APP端、WEB端和微信端，所述DB通过信号连接有Oracle Golden Gate，所述Log通过信号连接有Logstash，所述Oracle Golden Gate通过信号连接有两个Kafka，所述Logstash与两个Kafka通过信号连接，所述Kafka通过信号连接有STORM，所述STORM通过信号连接有两个Redis，所述APP端通过信号连接有Nginx，所述WEB端与Nginx通过信号连接，所述微信端与Nginx通过信号连接，所述Nginx通过信号连接有两个REST Sever，所述REST Sever与Redis通过信号连接。

优选的，所述DB和Log组成数据存储层，所述数据存储层即数据源，包含数据库、日志等存储系统，负责存储原始业务数据，是实时业务报表的最原始记录，Log日志为前台受理记录，系统程序日志记录和服务器日志记录。

优选的，所述Oracle Golden Gate和Logstash组成数据采集层，所述数据采集层负责从多种数据源上实时采集数据，考虑数据源种类多样化，数据采集程序应具有普适性或针对不同的数据源部署相应的采集程序，针对DB数据库，可以通过数据库操作日志，本发明中采用OGG进行数据复制及同步，将数据采集到接入层，针对Log日志文件，采集程序需要具备实时数据传输能力，不同结构解析能力，Logstash是一个开源的数据收集引擎，它可以统一过滤来自不同源的数据，变成可读性高的内容，并按照开发者的制定的规范输出到目的地,本发明中采用Logstash日志的收集传入接入层。