[发明专利]一种数据查询方法、装置、服务器及存储介质在审
申请号: | 202111164687.9 | 申请日: | 2021-09-30 |
公开(公告)号: | CN115905277A | 公开(公告)日: | 2023-04-04 |
发明(设计)人: | 许正一;张建兴;李林森 | 申请(专利权)人: | 杭州海康威视数字技术股份有限公司 |
主分类号: | G06F16/242 | 分类号: | G06F16/242;G06F16/2458;G06F16/27 |
代理公司: | 北京柏杉松知识产权代理事务所(普通合伙) 11413 | 代理人: | 项京;高莺然 |
地址: | 310051 浙*** | 国省代码: | 浙江;33 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 数据 查询 方法 装置 服务器 存储 介质 | ||
本发明实施例提供了一种数据查询方法、装置、服务器及存储介质,方法包括:获取数据查询请求,并根据数据查询请求所指示的时间区间,构造多个时间条件,每个时间条件对应一个时间子区间,获取符合当前时间条件的时间子区间对应的一批时序数据,对时间子区间对应的一批时序数据按照预设处理方式进行处理,得到对应的处理结果,将处理结果与当前已存储的处理结果进行合并,在此过程中,确定下一时间条件为当前时间条件,并返回获取当前时间条件的时间子区间对应的一批时序数据的步骤,直到数据为最后一批时序数据,将当前已存储的处理结果确定为查询结果。对当前一批时序数据处理的同时拉取下一时间条件对应的一批时序数据,提升了数据查询效率。
技术领域
本发明涉及大数据技术领域,特别是涉及一种数据查询方法、装置、服务器及存储介质。
背景技术
随着大数据时代的到来,数据的分布式存储系统应用越来越广泛,常见的分布式存储数据库包括OpenTSDB(Opentime series database)、Influxdb等时序数据库,其可以存储大量数据,为数据查询、数据处理、数据分析等提供数据基础。
目前,基于分布式存储系统的查询业务的处理方式为:首先从数据库拉取满足查询条件的所有数据,将拉取到的数据全部放入内存中,然后再对拉取的数据进行处理得到查询结果。即拉取所有数据结束后才进行数据处理。
在上述查询方式中,在拉取所有数据之后进行数据处理,会占用大量内存,同时数据查询效率也较低。
发明内容
本发明实施例的目的在于提供一种数据查询方法、装置、服务器及存储介质,以解决数据查询占用大量内存,数据查询效率低的问题。具体技术方案如下:
第一方面,本发明实施例提供了一种数据查询方法,应用于时序数据库的服务器,所述方法包括:
获取数据查询请求,并根据所述数据查询请求所指示的时间区间,构造多个时间条件,其中,每个时间条件对应所述时间区间中的一个时间子区间;
获取符合当前时间条件的时间子区间对应的一批时序数据;
对所述时间子区间对应的一批时序数据按照预设处理方式进行处理,得到对应的处理结果,将所述处理结果与当前已存储的处理结果进行合并;
在对所述时间子区间对应的一批时序数据按照预设处理方式进行处理,得到对应的处理结果,将所述处理结果与当前已存储的处理结果进行合并的过程中,确定下一时间条件为当前时间条件,并返回所述获取当前时间条件的时间子区间对应的一批时序数据的步骤,直到获取的时序数据为最后一批时序数据;其中,所述预设处理方式为根据所述数据查询请求确定的数据计算方式,所述当前已存储的处理结果为对已处理的各批时序数据的处理结果进行合并得到的;
将当前已存储的处理结果确定为查询结果。
可选的,在所述将所述处理结果与当前已存储的处理结果进行合并的步骤之前,所述方法包括:
在所述处理结果为第一批时序数据对应的处理结果的情况下,创建结果缓存并将所述处理结果进行存储;
在所述处理结果为非第一批时序数据对应的处理结果的情况下,执行所述将所述处理结果与当前已存储的处理结果进行合并的步骤。
可选的,在所述获取当前数据查询条件对应的一批时序数据的步骤之前,所述方法包括:
根据所述数据查询请求确定数据计算方式;
基于所述数据计算方式注册聚合算子,其中,所述聚合算子包括:降采样计算算子、聚合计算算子、变化率计算算子中至少一种;
所述对所述时间子区间对应的一批时序数据按照预设处理方式进行处理的步骤,包括:
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于杭州海康威视数字技术股份有限公司,未经杭州海康威视数字技术股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202111164687.9/2.html,转载请声明来源钻瓜专利网。
- 上一篇:LED显示面板及其制造方法、LED显示屏
- 下一篇:天线及电子设备
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置