[发明专利]基于X86板卡的网络数据平台及数据采集过滤分析方法

说明书

本发明涉及一种基于X86板卡的网络数据平台及数据采集过滤分析方法，是基于X86板卡的网络数据平台X86板卡的计算刀片上进行网络数据包的高速采集，并进行采集数据包的字符串或正则表达式的规则过滤，同时对命中或采集数据进行包结构分析处理，该平台实现了网络数据包的接入采集/规则命中/分析处理多重功能，能针对光纤接入的10G以太网信号或从机箱背板接入的40G以太网信号进行处理，在实际生产应用中接入PTN网络信号作为专门分析处理平台，处理输出命中数据集和分析处理结果集，该处理平台部署在x86计算刀片上可作为ATCA机箱的处理单元，与其他接入处理板卡形成一整套针对光纤PTN以太网信号的接入过滤分析处理设备，灵活性强；满足用户需求。

技术领域

本发明涉及一种网络数据采集过滤及分析处理平台，特别涉及一种基于X86板卡的网络数据平台及数据采集过滤分析方法。

背景技术

当前网络数据处理平台在功能上多为采集分析或独立采集功能，较少包含有采集之后直接进行字符串或正则表达式过滤匹配功能，而且当前数据处理设备对PTN信号这种带MPLS标签的非普通以太网结构的数据分析不支持，更没有过滤功能，而用户对类以太网结构的PTN信号的采集过滤分析，以及用户对60G信号处理能力的要求越来越高。从设计实现方案来讲，用户对数据的深度分析的需求越来越多，当前使用DPDK做数据路由转发并做简单数据渐层分析的居多，用DPDK与Hyperscan做处理流程的对接，并且实现二次开发的尚属较少案例，而且目前大部分数据处理设备都是对标准以太网的分析处理，其中nDPI深度包检测也是只针对标准以太网分析。

发明内容

鉴于网络数据处理中对采集过滤分析功能的集成化和全面性需求，本发明提供一种基于X86板卡的网络数据平台及数据采集过滤分析方法，在x86板卡计算刀片上将DPDK和Hyperscan的开发框架进行了代码级别的二次开发和融合，让接入数据统一进行采集过滤，同时进行数据的结构分析和ndpi的包中业务识别和统计，具体技术方案是，一种基于X86板卡的网络数据平台，板卡的外部接口包括四个10GE的光口、两个RG45的网口、一个console调试接口、HDMI接入接口、两个USB口、背板具备40G网口，一个千兆网口，X86板卡系统启动可接入显示器及鼠标键盘，查看系统启动状态，其特征在于：x86板卡的背板40GE与交换板的背板40GE相连，提供数据流量通路，x86板卡的前面板的10GE光口与线路卡的后面板10GE光口互联，用于底数轮询采集功能，设备的控制接口是实现背板与以太网互联，将所有板卡的背板千兆网口互通，实现控制指令交互；按功能模块划分，分为数据采集模块、规则处理模块、数据分析模块，连接为数据采集模块与数据分析模块单向连接，数据采集模块、规则命中处理模块、数据分析模块依次连接，其中规则处理模块内为用户数据规则配置与筛选单元、规则管理单元、规则过滤命中单元依次连接。