[发明专利]云计算环境下监控数据流向的方法及系统

说明书

技术领域

本发明涉及云计算环境下监控数据流向的方法及系统。

背景技术

在宏观上展现数据流在云环境下的各节点之间的流动状况，目前国内外针对这一领域已经开展的技术研究工作，有以下特点：

（1）在业务数据上附着标签，在数据传递的各个阶段检查和记录标签。

（2）从微观角度出发，针对具体的数据实施逐条逐阶段的跟踪监视。

第（1）点存在的风险是，在原始数据上直接修改和增加标签，有可能对业务处理和数据传递造成不利影响。第（2）点则面临效率方面的挑战，云计算环境通常意味着大数据，具体的细粒度的监控很可能导致大量额外资源的消耗。

发明内容

为解决现有技术存在的不足，本发明公开了云计算环境下监控数据流向的方法及系统，本发明不修改原始数据流中的数据包，仅仅在节点之间按照一定比例掺杂额外的数据包，掺杂数据随同原始数据一起流动。各节点分别统计单位时间内从本节点发出的掺杂数据总量和接收到的掺杂数据总量，汇总到数据分析中心，数据分析中心综合分析各节点报告的情况，定期产生最近的数据流向监控信息，以供决策使用。本发明可以在宏观上展现数据流在云环境下的各节点之间的流动状况。

为实现上述目的，本发明的具体方案如下：

云计算环境下监控数据流向的方法，包括以下步骤：

步骤一：云环境下，节点既能作为数据源节点又能作为数据目的节点，数据源节点网络的出口模块及数据目的节点的网络入口模块协同实现数据的数据掺杂和检测；

步骤二：网络出口模块向云环境中统一的数据分析中心报告单位时间内发出的掺杂数据包数量，网络入口模块向云环境中统一的数据分析中心报告单位时间内接收的来自各源节点的掺杂数据包数量，数据分析中心基于收发比例分析数据流向。

所述步骤一中，节点作为数据源节点时，节点中的网络出口模块过滤原始数据流，按比例向网络上发送额外的掺杂数据；

节点作为数据目的节点时，节点中的网络入口模块过滤来自网络的数据包，放行原始数据流，截获掺杂数据包后提取上一个节点的信息，然后丢弃掺杂数据包，因此掺杂数据包不会污染业务应用的运行环境。

所述数据包中含有包含该数据包节点的标识信息。

所述步骤二中，基于收发比例分析数据流向时，网络出口模块发出数据包总量应当等于网络入口模块接收到的数据包总量，对每一个接收节点，通过计算接收到的来自某源节点的数据包数量占该源节点发出数据包总量的比例，就可以得到数据流的分流情况。

所述网络出口模块发送数据时，包括以下步骤：

（1-1）：过滤原始数据流的数据包，并计数，当计数值达到触发掺杂数据的比例，则转向步骤（1-2），否则转向到步骤（1-5）；

（1-2）：保持当前的数据包不变的情况下，克隆当前数据包，副本数据包将会作为掺杂数据包，如此不会破坏原始数据；

（1-3）：保持掺杂数据包的TCP协议层及TCP以下协议层不变，修改应用层数据，记录当前节点信息，不修改网络层数据的目的地，是保证掺杂数据能与相应的原始数据一起流动；记录的当前节点信息，这些信息将会在数据目的节点的网络入口模块中被解析出来；

（1-4）：正常发送掺杂数据包；

（1-5）：正常发送原始数据包，然后返回到（1-1）继续执行。

所述网络入口模块接收数据时，包括以下步骤：

（2-1）：截获当前数据包，判断是否掺杂数据；如果是掺杂数据，则转向步骤（2-2），否则转向到（2-5）。

（2-2）：在掺杂数据中提取应用层数据信息，即获得数据来源节点的信息。

（2-3）：向统一数据分析中心汇总上报从掺杂数据包中获取的信息。

（2-4）：丢弃掺杂数据包，以避免影响上层业务环境和业务处理。

（2-5）：正常向上层提交原始数据包，然后返回到（2-1）继续执行。

所述节点包括终端、门户/网关、宿主机、虚拟机及存储。

云计算环境下监控数据流向的系统，包括云环境下的节点，每个节点可以作为数据源节点，也可以作为数据目的节点，或者兼具两种职能，数据源节点的网络出口模块及数据目的节点的网络入口模块协同工作实现数据的数据掺杂和检测；

网络出口模块向云环境中统一的数据分析中心报告单位时间内发出的掺杂数据包数量，网络入口模块向云环境中统一的数据分析中心报告单位时间内接收的来自各源节点的掺杂数据包数量，实现基于收发比例分析数据流向。