[发明专利]一种监控数据存储方法

说明书

本发明提供了一种监控数据存储方法，包括：获取监控数据，并传输至预设有令牌规则的存储网关中间件，确定传输结果；其中，所述传输结果包括令牌数据和异常数据；存储所述令牌数据至存储服务器的存储数据库中，并将所述异常数据按照存储磁盘预设的备份机制，生成备份数据；基于预设的数据统计规则和告警阈值，统计所述传输结果，生成统计数据，并确定预警触发事件；判断所述统计数据是否超过告警阈值，生成告警信息，并发送至用户前端。本发明的有益效果在于：对输入数据做了限流处理，提高存储数据库对高数据量的应对能力，实现了对存储数据库的过载限流，降低了繁杂的手动测试，提高系统稳定性，方便方案扩展和后期运维，有效提高用户体验。

技术领域

本发明涉及数据系统设计技术领域，特别涉及一种监控数据存储方法。

背景技术

本发明公开了适用于多架构云平台监控领域中的一种监控数据存储方法，随着多架构云平台中系统业务规模的扩大升级，监控数据的采集量是越来越大，对数据存储的压力是越来越大，如何实现对监控数据的存储要求是越来越高，传统的监控存储方法是不能完全满足当前需求。

本发明公开了一种监控数据存储方法，实现了一种基于令牌桶限流的存储网关中间件设计，将数据输入与存储服务做了管道过滤隔离，提高了存储数据库对高数据量的应对能力，不会因导致存储崩溃，继而导致整个系统不可用的问题，保障了采集数据的完整性，不会导致采集数据部分丢失，为后续数据导入到存储服务做好前提准备。实现了对监控数据流量的管控和存储服务的性能的统筹管理，降低了繁杂的手动测试，提高系统稳定性，方便方案扩展，有效提高用户体验。同时该方法适用于多种云平台基础架构的数据存储方案，例如X86、ARM以及MIPS平台均可适用。

发明内容

本发明提供一种监控数据存储方法，用以解决数据流量低的情况下，会带来资源的浪费，系统复杂度过高的情况。

一种监控数据存储方法，包括：

获取监控数据，传输至设有令牌规则的存储网关中间件，确定异常数据，并生成令牌数据；

存储所述令牌数据至存储数据库中，并将所述异常数据备份，生成备份数据；

基于所述预设的数据统计规则和预警事件，生成统计信息，并将所述统计信息发送至用户前端。

作为本发明的一种实施例，优选地，所述获取监控数据，传输至设有令牌规则的存储网关中间件，确定异常数据，并生成令牌数据，包括：

获取监控数据，传输至存储网关中间件，确定传输数据；其中，

所述存储网关中间件用于获取并传输所述监控数据，生成传输数据；

基于所述存储网关中间件内预设的令牌规则，接收所述传输数据；其中，

所述令牌规则包括令牌容器和令牌容器均速分发限流机制；其中，

所述令牌容器用于生成令牌；

所述令牌容器均速分发限流机制用于限制所述传输数据的数据流量；

根据令牌容器均速分发限流机制，向所述传输数据均速分发令牌，确定分发数据；其中，

所述分发数据包括生成令牌数据和未生成令牌数据；其中，

所述令牌数据由接收到令牌的监控数据组成；

所述非令牌数据由未接到令牌的监控数据组成；

根据所述非令牌数据，确定异常数据。

作为本发明的一种实施例，优选地，所述基于所述存储网关中间件内预设的令牌规则，接收所述传输数据，包括：

根据存储网关中间件，确定对应的存储服务器；