[发明专利]一种基于网络设备的数据采集系统及方法

权利要求书

1.一种基于网络设备的数据采集系统，其特征在于：包括采集引擎及规则引擎；所述采集引擎包括采集控制器、定时框架、消息服务接口、命令控制插件、设备发现插件和设备采集插件；当采集系统启动时，自动加载定时框架，到达指定时间后，由定时框架启动插件进行设备数据采集；所述采集控制器用于接收系统监控控制命令；设备采集插件安装完毕后，采集控制器按照安装顺序依次启动设备采集插件，在启动过程中为设备采集插件分配调度作业以及数据上报；设备采集插件启动后按照之前分配的调度作业依据对应的监控协议工具获取设备数据，通过消息服务接口将数据上报给规则引擎；

数据采集系统还包括用于监控、处理采集数据的监控引擎；

所述监控引擎运行框架使用Apache Felix框架，主控器接收系统控制台命令进行监控引擎的安装、启停和卸载操作，监控引擎启动后由工具服务提供定时的协议操作与消息数据处理操作接口完成监控任务；

上述数据采集系统所执行的一种基于网络设备的数据采集方法，包括以下步骤：

S1：当采集器启动时，自动加载定时框架，到达指定时间后，由定时框架启动插件进行设备数据采集；

S2：设备采集插件采集基础指标时首先判断采集是否为性能数据，若基础指标为性能数据则直接采集，将数据存入内存中，并进入S4；若基础指标非性能指标则执行S3；

S3：采集关于此指标的数据并与嵌入式数据库中的信息进行对比；若数据库中取值为空或者两者数据不一致，则将其指标数据存入内存中并更新数据库中的信息，最终将这些基础指标数据传送至规则引擎；

S4：规则引擎对基础指标数据根据相关策略进行加工处理，并将处理之后的数据通过消息服务接口将这些设备数据上报至上一级MQ，由监控引擎进行监控；

还包括步骤S5：由系统控制台对系统进行维护后通过MQ给采集引擎发送命令，命令完成后会给固定MQ的固定队列发送部署成功的命令；

所述S4中监控引擎对数据的监控包括以下步骤：

S41： 监控引擎启动时向消息服务器发送启动信息，其中包括监控代理ID、安装位置和内置采集代理信息；

S42：系统控制台通过监听消息服务队列收到监控引擎启动信息；

S43：系统控制台将监控引擎启动信息存储在数据库引擎运行信息表中；

S44：系统控制台读取监控引擎信息；

S45：系统控制台下发监控引擎同步命令；

S46：监控引擎中的引擎控制器接收引擎同步命令，通过广播命令中引擎ID判断是否为自己的命令信息；

S47：监控引擎确认命令信息后，向系统控制台通过HTTP请求方式下载引擎关联的监控代理；

S48：监控引擎控制器将下载到引擎安装目录下的监控代理解压并安装启动，开始执行监控任务；

所述系统控制台可在完成维护工作后通过消息队列给采集代理发送安装监控模板命令，采集代理在第一次启动后监听固定MQ的固定主题，当获取到对应ID的安装监控模板的指令后，会将命令中的参数转化成模板bundle，部署至采集代理的文件内；部署完成后会给固定MQ的固定队列发送部署成功的命令，且在步骤S5后按照部署的监控模板中的参数频率，启动不同频率的调度程序，按照监控模板中的资源信息去连接特定的资源获取参数信息，将信息进行整理发送到固定MQ的固定队列上。

2.根据权利要求1所述的基于网络设备的数据采集系统，其特征在于：所述采集引擎为OSGI容器。

3.根据权利要求1所述的基于网络设备的数据采集系统，其特征在于：S3中规则引擎进行如下处理：

S31：规则引擎启动加载指标告警阈值规则；

S32：监控引擎上报监控数据，规则引擎接收监控数据；按规则引擎预先存储的应用规则处理监控数据；并将指标、告警数据存入内存队列；

S33：规则引擎将告警信息推送至语音消息队列、拓扑消息队列；

S34：规则引擎存储器将指标、告警信息更新存储至缓存并存储至数据库；

S35：系统控制台读取实时指标、告警信息；或系统控制台根据需求读取历史指标、告警信息；

S36：语音告警终端接收告警信息并播报；且拓扑展现接收告警信息。

4.根据权利要求1所述的基于网络设备的数据采集系统，其特征在于：采集引擎第一次启动时需通过脚本命令人工启动主程序。