[发明专利]一种基于Oracle数据和Hbase数据进行数据存储的方法

说明书

本发明涉及一种基于Oracle数据和Hbase数据进行数据存储的方法，提供一综合网管系统，所述综合网管系统包括监控设备、数据采集器、数据处理器和数据存储器；数据采集器分别与监控设备和数据处理器通信相连，数据处理器还与所述数据存储器通信相连；具体按照如下步骤实现：步骤S1：监控设备对综合网管系统进行监控；数据采集器通过监控设备开通的SNMP协议采集监控设备中的监控数据，并将采集的监控数据发送到数据处理器；步骤S2：数据处理器利用其内部的Esper复杂事件处理引擎将接收到的监控数据分为指标数据和当前告警数据，并将的两个数据存储到数据存储器；步骤S3：所述数据存储器将接收到的两种数据分别存储到各自所属的数据库中。本发明能够解决关系型数据库对海量数据存储、查询等性能问题。

技术领域

本发明涉及信息技术领域，特别是一种基于Oracle数据和Hbase数据进行数据存储的方法。

背景技术

目前综合网管系统采用关系型数据库(oracle)，对于网管监控项目修改库表结构尤为频繁，随综合网管业务发展后台数据吞吐量、数据采集、查询和处理已出现性能瓶颈。

随着电力系统网络基础设施的扩展加速以及综合网管业务的高速发展，后台支撑系统已经不堪重负。在吞吐量、稳定性以及可扩展性上都无法满足日益增长的业务需求。随着业务量的快速增长，综合网管的运维成本急剧增加。

基于传统架构设计开发的综合网管系统，在信息通信网络资源设备数量急剧上升，对网络设备管理、运行可靠性提出了更高的要求，已出现了数据采集、查询和处理的性能瓶颈；且应用部署、升级和扩展方面比较复杂，对监控对象的变化适应性差等问题。

发明内容

有鉴于此，本发明的目的是提出一种基于Oracle数据和Hbase数据进行数据存储的方法，能够解决关系型数据库对海量数据存储、查询等性能问题。

本发明采用以下方案实现：一种基于Oracle数据和Hbase数据进行数据存储的方法，提供一综合网管系统，所述综合网管系统包括监控设备、数据采集器、数据处理器和数据存储器；所述数据采集器分别与所述监控设备和所述数据处理器通信相连，所述数据处理器还与所述数据存储器通信相连；具体按照如下步骤实现：

步骤S1：所述监控设备对综合网管系统进行监控；所述数据采集器通过所述监控设备开通的SNMP协议采集所述监控设备中的监控数据，并将采集的监控数据发送到所述数据处理器；

步骤S2：所述数据处理器利用其内部的Esper复杂事件处理引擎将接收到的监控数据分为指标数据和当前告警数据，并将所述的两个数据存储到所述数据存储器；

步骤S3：所述数据存储器将接收到的两种数据分别存储到各自所属的数据库中。

进一步地，所述步骤S3的具体内容为：所述数据存储器包括Hbase数据库和Oracle数据库；所述指标数据存储到所述Hbase数据库中，所述当前告警数据存储到所述Oracle数据库中。

与现有技术相比，本发明有以下有益效果：

本发明采用oracle数据与Hbase数据相结合的方式，解决关系型数据库对海量数据存储、查询等性能问题，并使用oracle数据库弥补对核心数据的事件访问、复杂关系数据的查询问题。提升了用户满意度、推动了Hbase与oracle协同发展。

附图说明

图1为本发明实施例的。

具体实施方式

下面结合附图及实施例对本发明做进一步说明。