[发明专利]一种网络统计数据筛选的方法

摘要

本发明属于网络数据筛选技术领域，公开了一种网络统计数据筛选的方法,包括以下步骤：A.控制台向服务器发起查询数据请求；B.解析相关参数；C.解析过滤条件;D.存储读取数据;E.第一次过滤数据，读取存储查询数据中的键值部分；F.合并数据；G.第二次过滤数据，将合并后的非键值对数据记录依次传入过滤器中；F.数据发送给控制台。通过对数据指标进行过滤筛选，其筛选功能非常全面，最大限度提升的系统的筛选能力；极大的提高了筛选效率和数据获取的精准率。

主权项

1.一种网络统计数据筛选的方法，其特征在于：该方法包括以下步骤：A. 控制台向服务器发起查询数据请求，并传入过滤条件；B. 服务器接收到请求，解析相关参数, 相关参数包括查询时间范围、链路ID、统计表ID和过滤条件；C. 解析过滤条件，通过过滤器将复合的逻辑过滤条件分解成以每个字段为实体的逻辑关系链;D. 存储读取数据，根据查询的时间范围、链路ID、统计表ID向存储查询数据;E. 第一次过滤数据，读取存储查询数据中的键值部分，将读取到的数据分解成多条统计数据传入过滤器中，并只匹配键值数据，并将每个字段的匹配结果记录在过滤器中；如果整个过滤器不匹配，则丢弃该条统计数据；如果整个过滤器匹配，则进行下一步；F. 合并数据,获取查询参数中的键值集合，并计算集合的哈希值，同时创建一条记录，存入对应哈希值的哈希表中，然后将具有相同哈希值的存储记录的非键值对数据进行合并；G. 第二次过滤数据，将合并后的非键值对数据记录依次传入过滤器中，并只匹配非键值数据，并将每个字段的匹配结果记录到过滤器中；过滤器对每个字段过滤一个对应的结果；过滤器的逻辑关系和每个字段的结果计算整个过滤器的结果，如果匹配，则过滤成功；如果不匹配，则丢失该条记录；F. 数据发送给控制台，将过滤到的结果通过网络发送给控制台。