[发明专利]一种基于大数据的网络数据采集系统

权利要求书

1.一种基于大数据的网络数据采集系统，其特征在于，包括：

网络数据采集模块，用于采集一种或多种不同类型的网络数据；

规则模块：用于定义网络数据识别规则和解码规则；

剔除模块：对无法识别的网络数据进行拦截剔除；

多类型数据转换模块，用于将网络数据根据统一的转换规则转换为处理器能识别的通用网络数据；

存储模块，对通用网络数据进行存储。

2.根据权利要求1所述的一种基于大数据的网络数据采集系统，其特征在于，网络数据采集模块还用于采集局域网数据。

3.根据权利要求1所述的一种基于大数据的网络数据采集系统，其特征在于，所述网络数据包括以下一种或多种信息：

经交换机监听接口监听的网络流量信息；

目标网络设备的配置信息、日志信息和设备状态信息。

4.根据权利要求3所述的一种基于大数据的网络数据采集系统，其特征在于，所述交换机为以太网交换机或光纤交换机。

5.根据权利要求3所述的一种基于大数据的网络数据采集系统，其特征在于，所述网络数据采集模块通过串口对经交换机监听接口的网络流量信息进行采集；以及通过串口对所述网络设备的配置信息、日志信息和设备状态信息进行采集。

6.根据权利要求1所述的一种基于大数据的网络数据采集系统，其特征在于，还包括节点提取模块，用于按照一定周期从采集的网络数据中提取数据作为节点数据。

7.根据权利要求6所述的一种基于大数据的网络数据采集系统，其特征在于，周期为10s、30s或60s。

8.根据权利要求1所述的一种基于大数据的网络数据采集系统，其特征在于，还包括解码模块，用于对被编码的网络数据进行解码。

9.根据权利要求1所述的一种基于大数据的网络数据采集系统，其特征在于，所述规则模块还包括：

流量分拣子模块，根据所述网络数据识别规则对网络数据采集模块采集到的所述网络数据进行规则匹配，获取符合所述网络数据识别规则的网路数据，并识别所述网络数据的类型；

负载均衡模块，根据识别出的所述网络数据的类型，将所述网路数据负载均衡分发到多类型数据转换模块。

10.根据权利要求9所述的一种基于大数据的网络数据采集系统，其特征在于，所述网络数据识别规则具体包括：匹配条件、识别内容和处理动作，其中：

匹配条件包括：网络数据采集入口标识符；

所述识别内容包括：识别出的网络类型、识别出的逻辑接口类型；

所述处理动作包括：根据所述识别出的所述网络数据的类型对所述网络数据进行处理。