[发明专利]一种网络数据采集处理方法和装置

说明书

本申请公开了一种网络数据采集处理方法和装置，方法包括：S1、接收端采集处理单元接收到发送端采集处理单元发送的心跳消息，提取心跳消息中的发送端时间戳；S2、当本地时间戳与发送端时间戳的差值超过预置的时间差阈值时，通过发送异常请求消息确认发送端为处于异常时；S3、判断接收端是否为主采集处理单元，若是，执行S4，否则执行S5；S4、通过接收端设置发送端对应的LAN端口为不可用状态；S5、将接收端设置为主采集处理单元，通过接收端设置发送端对应的LAN端口为不可用状态。解决了现有技术无法检测到由于硬件问题、采集处理单元操作系统或软件问题导致的故障，进而继续把数据输出到相关的LAN端口导致数据丢失或断网的技术问题。

技术领域

本申请涉及网络数据采集技术领域，尤其涉及一种网络数据采集处理方法和装置。

背景技术

在通信技术飞速发展的今天，各种网络应用迅猛发展，网络流量也呈现出爆炸式的增长。为了能够提供更好的网络服务，保证更安全的网络环境，需要通过串接或并接的方式对网络数据进行采集、分析和处理。由于通信协议多种多样、数据格式千变万化，这对采集处理单元的处理能力和稳定性提出了极高的要求。

现有的采集处理单元，通常由汇聚交换设备通过LAN端口的电气状态来判断与采集处理单元的链路是否正常。在LAN端口状态和链路都正常的情况下，如果出现汇聚交换设备因监测不到的硬件故障导致LAN端口通信中断的故障，或者采集处理单元出现操作系统死机和采集处理软件出现故障时，汇聚交换设备将无法判断出故障，会继续把数据输出到相关的LAN端口，从而造成数据丢失或网络中断，将严重影响网络的安全和稳定。因此设计一种高可用并且负载均衡的网络数据采集处理方法和装置尤为重要。

发明内容

本申请提供了一种网络数据采集处理方法和装置，用于解决现有网络数据采集处理系统由于无法监测到硬件问题、操作系统死机或软件出现故障时，会继续把数据输出到相关的LAN端口，从而造成数据丢失或网络中断的技术问题。

有鉴于此，本申请第一方面提供了一种网络数据采集处理方法，应用于网络数据采集处理装置，各个所述采集处理单元与汇聚交换设备的LAN端口一一对应连接；

所述网络数据采集处理方法包括：

S1、响应于接收到的心跳消息，提取所述心跳消息中的发送端时间戳，其中，所述心跳消息为发送端采集处理单元向接收端采集处理单元发送的消息；

S2、当本地时间戳与所述发送端时间戳的差值超过预置的时间差阈值时，通过组网交换机发送异常请求消息至所述发送端采集处理单元，当收到异常确认消息或响应超时消息，确定所述发送端采集处理单元为异常状态；

S3、判断所述接收端采集处理单元是否为主采集处理单元，若是，执行步骤S4，否则执行步骤S5；

S4、通过所述接收端采集处理单元设置所述发送端采集处理单元对应的LAN端口为不可用状态；

S5、将所述接收端采集处理单元设置为所述主采集处理单元，通过所述接收端采集处理单元设置所述发送端采集处理单元对应的LAN端口为不可用状态。

可选地，步骤S1之前还包括：

各个所述采集处理单元均预设主机ID号。

可选地，步骤S5之后还包括：

当本地时间戳与所述发送端时间戳的差值未超过预置的时间差阈值时，将所述主采集处理单元设置为备采集处理单元。

可选地，当设置有多个所述采集处理单元时，步骤S5包括：

将任意一个所述接收端采集处理单元设置为所述主采集处理单元，通过所述接收端采集处理单元设置所述发送端采集处理单元对应的LAN端口为不可用状态。

可选地，当设置有多个所述采集处理单元时，步骤S5还包括：