[发明专利]一种PCAP数据包高速索引方法及系统

权利要求书

1.一种PCAP数据包高速索引方法，其特征在于，所述方法包括：

遍历历史数据包及历史索引数据，得到数据包结构表及索引结构表；

基于所述数据包结构表建立若干分布式底层数据库；

基于所述索引结构表建立索引分发规则；

结合所述若干分布式底层数据库及所述索引分发规则建立缓存数据池；

通过所述索引分发规则在所述缓存数据池中获取对应于查询需求的数据。

2.根据权利要求1所述的方法，其特征在于，所述遍历历史数据包及历史索引数据，得到数据包结构表及索引结构表，包括：

依据数据类型对所述历史数据包进行一次遍历，得到以数据类型为准的一级遍历结构；

依据数据长度及数据存储体积对所述一级遍历结构进行二次遍历，得到二级遍历结构；

依据数据查询频率对所述二级遍历结构进行三次遍历，得到三级遍历结构；

整合所述一级遍历结构、所述二级遍历结构及所述三级遍历结构，得到所述数据包结构表；

以及，依据历史查询频率对所述历史索引数据进行一次遍历，得到一级索引结构；

依据数据类型对所述一级索引结构进行二次遍历，得到二级索引结构；

整合所述一级索引结构及所述二级索引结构，得到所述索引结构表。

3.根据权利要求2所述的方法，其特征在于，所述基于所述数据包结构表建立若干分布式底层数据库，包括：

基于所述一级遍历结构对所述历史数据包进行拆分，得到按照数据类型进行分类的若干子历史数据包；

基于所述二级遍历结构，将所述若干子历史数据包分别存储于若干分布式底层数据库中；

基于所述三级遍历结构，为所述若干分布式底层数据库中的数据设定数据权重。

4.根据权利要求2所述的方法，其特征在于，所述基于所述索引结构表建立索引分发规则，包括：

基于所述一级索引结构设定查询权重，其中，查询权重的数值与查询频率正相关；

基于所述二级索引结构设置与所述查询需求的数据类型相对应的查询信道；

综合所述查询权重及查询信道作为衡量所述查询需求的索引分发规则。

5.根据权利要求3或4所述的方法，其特征在于，所述结合所述若干分布式底层数据库及所述索引分发规则建立缓存数据池，包括：

构建缓存数据池，基于所述数据权重及所述查询权重为每一所述分布式底层数据库分配缓存带宽；

对所述数据权重与所述查询权重构建寻址映射关系；

采用所述寻址映射关系适配所述缓存数据池。

6.一种一种PCAP数据包高速索引系统，其特征在于，所述系统包括：

遍历单元，用于遍历历史数据包及历史索引数据，得到数据包结构表及索引结构表；

数据库建立单元，用于基于所述数据包结构表建立若干分布式底层数据库；

规则建立单元，用于基于所述索引结构表建立索引分发规则；

缓存建立单元，用于结合所述若干分布式底层数据库及所述索引分发规则建立缓存数据池；

索引查询单元，用于通过所述索引分发规则在所述缓存数据池中获取对应于查询需求的数据。

7.根据权利要求6所述的系统，其特征在于，所述遍历单元包括：

一级遍历子单元，用于依据数据类型对所述历史数据包进行一次遍历，得到以数据类型为准的一级遍历结构；

二级遍历子单元，用于依据数据长度及数据存储体积对所述一级遍历结构进行二次遍历，得到二级遍历结构；

三级遍历子单元，用于依据数据查询频率对所述二级遍历结构进行三次遍历，得到三级遍历结构；

结构整合子单元，用于整合所述一级遍历结构、所述二级遍历结构及所述三级遍历结构，得到所述数据包结构表；

一级索引子单元，用于依据历史查询频率对所述历史索引数据进行一次遍历，得到一级索引结构；

二级索引子单元，用于依据数据类型对所述一级索引结构进行二次遍历，得到二级索引结构；

索引整合子单元，用于整合所述一级索引结构及所述二级索引结构，得到所述索引结构表。