[发明专利]数据查询方法、非易失性存储介质及电子设备

说明书

本申请公开了一种数据查询方法、非易失性存储介质及电子设备。其中，该方法包括：对时序数据进行预处理，并将处理后的上述时序数据存储至目标文件，其中，上述目标文件采用按块方式存储上述时序数据；获取上述时序数据查询条件，其中，上述时序数据查询条件包括：时序键标识、域名称以及第一时间范围；基于上述时序数据查询条件对目标文件执行查询操作，得到查询结果，其中，上述目标文件采用按块方式存储时序数据并设置有多级层次索引结构；返回上述查询结果。本申请解决了现有技术中存在针对时序数据的查询内存消耗及查询延迟高，查询效率低下的技术问题。

技术领域

本申请涉及数据查询领域，具体而言，涉及一种数据查询方法、非易失性存储介质及电子设备。

背景技术

随着5G/IoT技术的高速发展，网络数据呈爆炸式增长，其中，物联网(IoT)与应用性能监控(APM)等是时序数据最典型的应用领域，海量的设备持续产生运行时指标数据，对数据的读写、存储管理都提出了很大的挑战。

例如，现有技术中InfluxDB的TSM文件格式关于时序数据的文件数据组织方法，在查询时需要将索引部分全部加载至内存中，不支持多级分层索引，当文件较大或者文件数较多时，内存的大小会成为查询的瓶颈；用于构建索引的Key的长度不固定且长度通常较长，需要使用冗余的字段KeyLength来表示Key的长度，会导致索引部分占用的磁盘空间占用高；当在一个文件中查询不存在的时序数据时，也要查询索引导致查询效率较低且查询内存消耗高，没有使用最小Key和最大key以及布隆过滤器等方式来提高无效文件的过滤效率；不支持在时序列式压缩的基础上支持通用块压缩，导致数据的压缩效率较低。

针对上述的问题，目前尚未提出有效的解决方案。

发明内容

本申请实施例提供了一种数据查询方法、非易失性存储介质及电子设备，以至少解决现有技术中存在针对时序数据的查询内存消耗及查询延迟高，查询效率低下的技术问题。

根据本申请实施例的一个方面，提供了一种数据查询方法，包括：对时序数据进行预处理，并将处理后的上述时序数据存储至目标文件，其中，上述目标文件采用按块方式存储上述时序数据；获取上述时序数据查询条件，其中，上述时序数据查询条件包括：时序键标识、域名称以及第一时间范围；基于上述时序数据查询条件对目标文件执行查询操作，得到查询结果，其中，上述目标文件采用按块方式存储时序数据并设置有多级层次索引结构；返回上述查询结果。

根据本申请实施例的另一方面，还提供了一种非易失性存储介质，上述非易失性存储介质包括存储的程序，其中，在上述程序运行时控制上述非易失性存储介质所在设备执行任意一项上述的数据查询方法。

根据本申请实施例的另一方面，还提供了一种电子设备，包括：处理器；以及存储器，与上述处理器连接，用于为上述处理器提供处理以下处理步骤的指令：对时序数据进行预处理，并将处理后的上述时序数据存储至目标文件，其中，上述目标文件采用按块方式存储上述时序数据；获取上述时序数据查询条件，其中，上述时序数据查询条件包括：时序键标识、域名称以及第一时间范围；基于上述时序数据查询条件对目标文件执行查询操作，得到查询结果，其中，上述目标文件采用按块方式存储时序数据并设置有多级层次索引结构；返回上述查询结果。

在本申请实施例中，通过对时序数据进行预处理，并将处理后的上述时序数据存储至目标文件，其中，上述目标文件采用按块方式存储上述时序数据；获取上述时序数据查询条件，其中，上述时序数据查询条件包括：时序键标识、域名称以及第一时间范围；基于上述时序数据查询条件对目标文件执行查询操作，得到查询结果，其中，上述目标文件采用按块方式存储时序数据并设置有多级层次索引结构；返回上述查询结果。