[发明专利]一种运行指标数据的处理方法及系统

说明书

本发明提供了一种运行指标数据的处理方法及系统，采用本方案，按照指定时间粒度划分时间区间，每个时间区间都构建相应的存储方案，其中，根据历史的时间区间的存储方案及其对应的索引集构建新的存储方案。基于存储方案在指定数据库中创建包含至少一个索引的索引集，每个索引具有指定容量。在获取到待存储的运行指标数据时，按照待存储的运行指标数据的采集时间确定相应的存储方案，再将获取到的运行指标数据存储到所确定的存储方案对应的索引中。将运行指标数据进行分布化存储，提高查询运行指标数据的效率和时效性。

技术领域

本发明涉及数据处理技术领域，具体涉及一种运行指标数据的处理方法及系统。

背景技术

在云运维工作中，需要周期性地采集大量监控对象的运行指标数据，将所采集的运行指标数据存储到易于查询的媒介上，以利用运行指标数据监控各个监控对象的运行状况。

目前通常采用单一数据集存储各个监控对象的运行指标数据。但是，随着云计算技术和行业的发展，云的规模越来越大，用于存储运行指标数据的单一数据集也越来越臃肿，导致从单一数据集中查询运行指标数据的效率较低且时效性较差。

发明内容

有鉴于此，本发明实施例提供一种运行指标数据的处理方法及系统，以解决现有存储运行指标数据的方式存在的查询运行指标数据的效率较低且时效性较差等问题。

为实现上述目的，本发明实施例提供如下技术方案：

本发明实施例第一方面公开一种运行指标数据的处理方法，所述方法包括：

采集到待存储的第一运行指标数据时，确定所述第一运行指标数据的采集时间所处的目标时间区间，所述目标时间区间为按照指定时间粒度所划分的时间区间；

在存储组件中不存在所述目标时间区间对应的第一存储方案的情况下，确定所述第一存储方案为默认的存储方案，以及确定所述目标时间区间的下一个时间区间的第二存储方案为所述默认的存储方案，其中，存储方案用于在指定数据库中创建包含至少一个索引的索引集，所述索引具有指定容量，所述索引用于存储指定监控对象的预设指标类型的运行指标数据；

将所述第一存储方案和所述第二存储方案保存到所述存储组件中，及将所述第一运行指标数据存储到所述第一存储方案对应的索引集的索引中；

在存储组件中存在所述目标时间区间对应的第一存储方案的情况下，将所述第一运行指标数据存储到所述第一存储方案对应的索引集的索引中，以及执行以下步骤；

所述以下步骤包括：

若所述存储组件中不存在所述目标时间区间的下一个时间区间对应的第二存储方案，利用所述目标时间区间的上一个时间区间的第三存储方案及所述第三存储方案对应的索引集，构建所述第二存储方案并将其存储到所述存储组件中。

优选的，存储组件包含磁盘和缓存；

将所述第一存储方案和所述第二存储方案保存到所述存储组件中的过程，包括：

将所述第一存储方案和所述第二存储方案在磁盘中进行持久化保存，并以哈希表的形式在缓存中备份所述第一存储方案和所述第二存储方案；

其中，所述哈希表中的键为监控对象和指标类型，所述哈希表中的值为索引。

优选的，将所述第一运行指标数据存储到所述第一存储方案对应的索引集的索引中的过程，包括：

以所述第一运行指标数据对应的监控对象和指标类型为键，对所述缓存中所述第一存储方案对应的索引集包含的索引进行查询，确定得到相应的第一目标索引；

将所述第一运行指标数据存储到所述指定数据库中的所述第一目标索引。