[发明专利]基于流量数据的通讯拓扑信息建模方法

说明书

本发明涉及一种基于流量数据的通讯拓扑信息建模方法及装置，包括以下步骤：采集所有引擎的流量数据，并将所述流量数据缓存到内存中；将采集到的所述流量数据汇总，去除重复数据；将分析整理后的所述流量数据抽象建模为可插入到图数据库中的对象库；数据持久化，将建模后的所述对象存储到图数据库中。本发明基于流量采集引擎上报的实时流量数据以图数据的方式进行建模，并将建模数据持久化到图数据库中的方案，该方案可以完美实现查看实时网络通讯拓扑图的功能，并解决了系统流量拓扑图的绘制和检索效率的问题。

技术领域

本发明涉及网络技术领域，尤其涉及一种基于流量数据的通讯拓扑信息建模方法及装置。

背景技术

本发明对背景技术的描述属于与本发明的相关技术，仅仅是用于说明和便于理解本发明的发明内容，不应理解为申请人明确认为或推定申请人认为是本发明在首次提出申请的申请日的现有技术。

传统的网络拓扑图是通过静态配置网络节点数据进行展现的，所有数据都要人工录入，后期也要投入极大精力维护这些数据；由于静态网络拓扑图不具备展现网络系统的实时通讯情况能力，网络管理员无法借助其及时发现网络中存在的风险。

随着网络规模的扩大，如何保证系统网络通讯信息的实时展现和检索是个挑战，当系统中节点达到一定规模后，利用传统的关系数据库对流量数据进行建模根本无法满足数据检索的实时性要求。

发明内容

针对以上问题，本发明提供一种基于流量数据的通讯拓扑信息建模方法及装置，基于流量采集引擎上报的实时流量数据以图数据的方式进行建模，并将建模数据持久化到图数据库中的方案，该方案可以完美实现查看实时网络通讯拓扑图的功能，并解决了系统流量拓扑图的绘制和检索效率的问题。

本发明提供一种基于流量数据的通讯拓扑信息建模方法，其特征在于，包括以下步骤：

流量采集，采集所有引擎的流量数据，并将所述流量数据缓存到内存中；

流量分析整理，按照预设时间间隔将采集到的所述流量数据汇总，去除重复数据，合并属于相同链路的流量数据；

拓扑数据建模，将分析整理后的所述流量数据抽象建模为可插入到图数据库中的对象，所述图数据库为Neo4j数据库；

数据持久化，将建模后的所述对象存储到图数据库中，具体包括，如果所述对象已在图数据库中存在，则用新的数据进行更新，否则，将所述对象插入到图数据库中。

进一步，所述流量数据包括如下属性：源ip地址、目的ip地址、源mac地址、目的Mac地址、源端口、目的端口、通信协议、包个数、告警个数、开始时间、结束时间。

进一步，对四元组(源ip地址，源端口，目的ip地址，目的端口)进行Hash运算，得到的Hash值作为链路唯一标识，并将所述Hash值存储到Hash表中，将Hash值相同的链路认定为相同链路，并整理相同链路的包个数、告警个数、开始时间、结束时间属性。

进一步，所述对象包括网络通讯节点实体对象和通讯节点间关系对象。

进一步，所述将建模后的所述对象存储到图数据库之后，还包括：提供检索接口，供web前端展示。

本发明还提供一种基于流量数据的通讯拓扑信息建模装置，用以执行上述一种基于流量数据的通讯拓扑信息建模方法，包括:

流量采集模块，用于采集所有引擎的流量数据，并将所述流量数据缓存到内存中；

流量分析整理模块，用于按照预设时间间隔将所述流量采集模块采集到的所述流量数据汇总，去除重复数据，合并属于相同链路的流量数据；

拓扑数据建模模块，用于将分析整理后的所述流量数据抽象建模为可插入到图数据库中的对象，所述图数据库为Neo4j数据库；