[发明专利]一种数据聚合方法及装置、电子设备和存储介质在审
申请号: | 202310506628.8 | 申请日: | 2023-05-06 |
公开(公告)号: | CN116541422A | 公开(公告)日: | 2023-08-04 |
发明(设计)人: | 吕锋 | 申请(专利权)人: | 武汉思普崚技术有限公司 |
主分类号: | G06F16/2455 | 分类号: | G06F16/2455;G06F16/22;G06F16/2458 |
代理公司: | 北京弘权知识产权代理有限公司 11363 | 代理人: | 逯长明;孙亚芹 |
地址: | 430070 湖北省武汉市武汉东湖新技术开发区光谷大道*** | 国省代码: | 湖北;42 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 数据 聚合 方法 装置 电子设备 存储 介质 | ||
1.一种数据聚合方法,其特征在于,所述方法包括:
获取网络数据流的流量数据;其中,所述流量数据中包含链路标识;
根据所述流量数据生成至少一个第一数据日志与至少一个第二数据日志;其中,所述至少一个第一数据日志包括所述流量数据中的所有第一指标信息;所述至少一个第二数据日志包括所述流量数据中的所有第二指标信息;
基于所述第一数据日志对应的所述链路标识,按照第一聚合规则将所有所述第一数据日志进行聚合,得到至少一个第一聚合日志;所述第一聚合日志包括至少一个所述第一数据日志;
基于所述第二数据日志对应的所述链路标识,按照第二聚合规则将所有所述第二数据日志进行聚合,得到至少一个第二聚合日志;所述第二聚合日志包括至少一个所述第二数据日志。
2.根据权利要求1所述的数据聚合方法,其特征在于,根据所述流量数据生成至少一个第一数据日志与至少一个第二数据日志,包括:
将所述网络数据流中的流量数据按照预设规则分成多个子流量数据;
根据所述子流量数据生成与所述子流量数据对应的第三数据日志和第四数据日志;所述第三数据日志属于所述第一数据日志,所述第四数据日志属于所述第二数据日志。
3.根据权利要求1所述的数据聚合方法,其特征在于,所述根据所述子流量数据生成与所述子流量数据对应的第三数据日志,包括:
对所述子流量数据中每个单位时长内的所述第一指标信息进行组合,以得到对应每个单位时长的所述第三数据日志。
4.根据权利要求1所述的数据聚合方法,其特征在于,所述根据所述子流量数据生成与所述子流量数据对应的第四数据日志,包括:
将所述子流量数据中的第一流量数据合并,以得到至少一个流数据;所述第一流量数据为五元组信息相同的第一报文的流量数据;所述五元组信息包括:源地址信息、源端口信息、目标地址信息、目标端口信息与通信协议;
根据所述流数据生成至少一个子数据日志;所述子数据日志属于所述第四数据日志。
5.根据权利要求4所述的数据聚合方法,其特征在于,所述根据所述流数据生成至少一个子数据日志,包括:
在所述流数据对应的第一报文所处的会话已结束的情况下,确定所述第一报文所处的会话的持续时长;
在所述持续时长小于或等于预设时长的情况下,生成一个所述子数据日志;
在所述持续时长大于预设时长的情况下,基于预设时长生成多个所述子数据日志。
6.根据权利要求1所述的数据聚合方法,其特征在于,所述基于所述第一数据日志对应的所述链路标识,按照第一聚合规则将所有所述第一数据日志进行聚合,得到至少一个第一聚合日志,包括:
按照多种时间粒度由小到大的顺序,对所述第一数据日志进行聚合,得到对应每种时间粒度的第一聚合日志;
和/或,根据所述链路标识对所述第一数据日志进行聚合,得到与所述链路标识对应的第一聚合数据日志。
7.根据权利要求1所述的数据聚合方法,其特征在于,所述基于所述第二数据日志对应的所述链路标识,按照第二聚合规则将所述第二数据日志进行聚合,得到至少一个第二聚合日志,包括:
根据所述链路标识对所述第二数据日志进行聚合,得到与所述链路标识对应的第二聚合数据日志;
和/或,根据所述五元组信息对所述第二数据日志进行聚合,得到与所述五元组信息对应的第二聚合数据日志。
8.根据权利要求1所述的数据聚合方法,其特征在于,所述方法还包括:
接收显示指令;其中,所述显示指令用于请求显示目标流量数据,所述显示指令包括所述目标流量数据的查询索引与显示形式;所述查询索引包括第一索引或第二索引;所述第一索引至少包括以下任一项或多项:目标链路标识、目标时间段;所述第二索引至少包括以下任一项或多项:目标链路标识、目标五元组信息、目标时间段;
根据所述查询索引查询所述目标流量数据;
按照所述显示形式显示所述目标流量数据。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于武汉思普崚技术有限公司,未经武汉思普崚技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202310506628.8/1.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置