[发明专利]一种基于大数据存储的检索分析方法、装置及介质

说明书

本发明公开一种基于大数据存储的检索分析方法、装置及介质，涉及数据存储分析技术领域，包括接收字段查询信息；根据所述字段查询信息在存储数据中搜索对应的现场可搜索事件，所述现场可搜索事件为一个或多个信息技术系统的安全性或性能方面的活动事件；生成对应的现场可搜索事件的子集；识别子集中一个或多个事件中字段，并确定上述字段存在的唯一值的个数；显示所选的字段名称和所述唯一值的个数，字段名称为可在查询信息中引用的字段的字段名称；根据用户输入的条件，面向存储于各数据中心的海量大数据，基于特定的查询标准对一组可搜索事件进行查询，显示查询字段结果和唯一值数字，从而极大的提升检索的速率，改善大数据库检索的使用感受。

技术领域

本发明涉及数据存储分析技术领域，尤其涉及一种基于大数据存储的检索分析方法、装置及介质。

背景技术

在大数据的环境下，根据用户提供的条件快速和准确的检索到用户关心和感兴趣的信息，是大数据应用的基础和重要的组成部分。随着计算机技术的不断发展和信息化程度的不断提高，数据量迅速增长，面向海量数据存储及应用也随之蓬勃发展，大数据应用越来越广泛。如，在网络安全上，使用大数据技术分析网络攻击行为；在电子商务上，使用大数据技术分析用户购物喜好或最受青睐的商品；在城市建设上，利用大数据技术构建智慧城市，方便人民出行。诸如此类，大数据技术在建设节约型社会，提高生成效率等方面起到了积极的推动作用。

但随着数据量的持续增大和大数据应用的不断发展，用于分业务或分省点存储数据的数据中心也越来越多。某些行业或机构常设立多个数据中心用于存储业务数据，如此在海量数据分析应用中，只能对单数据中心进行数据提取，对各数据中心的所有数据作为整体数据集进行分组、统计、排序等简单分析的需求也日益明显。在大数据应用中，将存储于各数据中心的海量数据作为整体进行分析是必备手段之一。

发明内容

本发明针对背景技术的问题提供一种基于大数据存储的检索分析方法、装置及介质，以达到提升检索的速率，改善大数据库检索的使用感受。

为了实现上述目的，本发明提出一种基于大数据存储的检索分析方法，方法包括：

接收字段查询信息；

根据所述字段查询信息在存储数据中搜索对应的现场可搜索事件，其中，所述现场可搜索事件为一个或多个信息技术系统的安全性或性能方面的活动事件；

生成所述对应的现场可搜索事件的子集；

识别所述子集中一个或多个事件中的字段，并确定上述字段存在的唯一值的个数；

显示所选的字段名称和所述唯一值的个数，其中，所述字段名称为可在查询信息中引用的字段的字段名称。

优选地，所述字段查询信息，包括但不限于：字段的值标准、和/或关键字的标准、和/或时间范围。

优选地，所述存储数据，包括：多组现场可搜索事件，其中，

各组现场可搜索事件中的每个事件均与时间戳关联；

各组现场可搜索事件中的每个事件均包括反映一个或多个信息技术系统中活动的机器数据；

各组现场可搜索事件中至少一个事件包括反映一个或多个信息技术系统中活动的日志数据；

各组现场可搜索事件中至少一个事件包括非结构化数据。

优选地，还包括：

显示具有字段并且存在于子集事件中的两个或更多个事件的信息，其中，所述两个或更多个事件以对应于字段的排序进行顺序显示。

优选地，所述字段的值标准，其中，所述字段存在于一组字段可搜索事件中的一个或多个事件中。

优选地，所述关键字的标准，具体为：要求匹配事件具有特定关键字的标准。