[发明专利]监控数据存储、查询方法及其相应的装置、设备、介质在审
申请号: | 202011394498.6 | 申请日: | 2020-12-03 |
公开(公告)号: | CN112506926A | 公开(公告)日: | 2021-03-16 |
发明(设计)人: | 郭锦荣;方佛财;陈武彬;成佳龙 | 申请(专利权)人: | 广州华多网络科技有限公司 |
主分类号: | G06F16/22 | 分类号: | G06F16/22;G06F16/28;G06F16/215;G06F16/2458 |
代理公司: | 广州利能知识产权代理事务所(普通合伙) 44673 | 代理人: | 王增鑫 |
地址: | 511442 广东省广州*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 监控 数据 存储 查询 方法 及其 相应 装置 设备 介质 | ||
本申请公开一种监控数据统计及查询方法及其装置、设备、介质,所述方法包括:根据属于监控数据的源数据所属的项目类型及数据类型,将源数据服务器提供的源数据分发存储至该数据类型相对应的数据表中,每一数据表用于存储一种项目类型中的一种数据类型相对应的源数据;以第一时间间隔定时访问各个数据表,按照每个数据表中在当前时刻之前特定时长范围内的历史数据生成对应的统计快照进行存储,所述统计快照包括以预设标准时长为存储粒度统计生成的多个统计数据;以第二时间间隔定时清理所述数据表中的历史数据,使其仅保留预定时长范围内的历史数据。本申请通过定时统计及清理历史数据,控制服务器稳定地为用户提供统计数据,防止服务器过载。
技术领域
本申请属于互联网技术领域,具体涉及一种监控数据存储、查询方法,及其相应的装置、电子设备、非易失性存储介质。
背景技术
互联网影响了全球人类生活的方方面面,同时也是我国最重要的行业之一,是我国GDP的主要组成部分。互联网公司为了收集用户的各类型数据,需要储存并统计各个用户的数据信息并加以计算统计用户的数据,开发人员可通过相应的配套页面获取并了解用户的各项数据,分析用户的数据并加以利用到实际的开发当中。
如今,大部分互联网公司采用实时方式来储存并统计用户数据,但若互联网公司的应用程序上拥有大量的用户,其所接收到的用户数据也将非常庞大,而实时对巨量的用户数据进行储存及统计,会使执行储存及统计的服务器非常不稳定,大量的用户数据不仅会使得服务器统计的过程过于缓慢,且开发人员在查询用户数据进行分析时,服务器反馈时间也将非常漫长,甚至可能因用户数据过多,使服务器无法有序的处理大量的用户数据,造成数据堵塞,导致服务器宕机,造成用户数据损坏,不但可能没有帮助开发人员,反而影响了开发人员的开发进度。
且互联网公司无构建相应的功能进行自动地清理堆积在相关的服务器数据库中的大量用户数据,而是采用人工的方式进行清理,可能造成服务器因存储大量的用户数据而无空闲的储存内存存储最新接收到的用户数据,使得监控计算模块无法计算及统计最新的用户数据供开发人员分析参考。
针对以上因监控计算模块不足的各类问题,亟待提供一些有效的解决方案。
发明内容
鉴于现有技术所存在的不足,本申请的首要目的,旨在提供一种监控数据存储方法及其相应的监控数据存储装置、电子设备、非易失性存储介质。
本申请的另一个目的,旨在提供一种监控数据查询方法及其相应的监控数据查询装置、电子设备、非易失性存储介质。
为满足本申请的各个目的,本申请采用如下技术方案:
适应本申请的首要目的之一而提供的一种监控数据存储方法,其包括如下步骤:
根据属于监控数据的源数据所属的项目类型及数据类型,将源数据服务器提供的源数据分发存储至该数据类型相对应的数据表中,每一数据表用于存储一种项目类型中的一种数据类型相对应的源数据;
以第一时间间隔定时访问各个数据表,按照每个数据表中在当前时刻之前特定时长范围内的历史数据生成对应的统计快照进行存储,所述统计快照包括以预设标准时长为存储粒度统计生成的多个统计数据;
以第二时间间隔定时清理所述数据表中的历史数据,使其仅保留预定时长范围内的历史数据。
进一步的实施例中,按照每个数据表中在当前时刻之前特定时长范围内的历史数据生成对应的统计快照进行存储的步骤,包括:
基于数据表获取当前时刻之前特定时长范围内的历史数据;
以标准时长为单位,以预定算法计算每标准时长的历史数据的统计数据;
以按照所述标准时长分割存储粒度生成的多个统计数据为集合元素,构成所述的统计快照进行存储。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于广州华多网络科技有限公司,未经广州华多网络科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202011394498.6/2.html,转载请声明来源钻瓜专利网。
- 上一篇:车库及车辆停取方法
- 下一篇:一种结直肠癌生物标志物及其应用
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置