[发明专利]一种日志存储方法、装置、设备及可读存储介质

说明书

本发明公开了一种日志存储方法，包括：获取待存储的日志数据，并标记日志数据的等级信息；判断日志队列中的日志条数是否小于预设的队列阈值；若否，则按照日志数据的等级信息和预设的存储配置在日志队列中确定冗余日志数据，并从日志队列中删除冗余日志数据；将日志数据和日志数据的等级信息记录至日志队列，并依照日志队列将日志数据存入磁盘。其中，当日志队列中的日志条数不小于预设的队列阈值时，剔除日志队列中的冗余日志数据，从而可以避免日志存储过程中的拥堵和阻塞，保障了当前集群的业务的连续性，给用户带来了良好的体验。相应地，本发明公开的一种日志存储装置、设备及可读存储介质，也同样具有上述技术效果。

技术领域

本发明涉及计算机技术领域，更具体地说，涉及一种日志存储方法、装置、设备及可读存储介质。

背景技术

在现有技术中，当记录集群中的日志时，一般先将需要记录的日志记录至日志队列，进而将日志队列中的日志存入磁盘，以完成日志的存储。其中，日志队列具有固定的长度，即其中可存储的日志条数是固定的。

在正常情况下，日志队列的记录和将日志队列中的日志存入磁盘这两个步骤能够保证日志数据的正常存储。但是当磁盘出现故障或由于其他因素导致磁盘写入繁忙时，日志队列中的日志存入磁盘的速率将大幅度下降，从而会导致日志队列很快被写满。此时由于待存储的日志数据仍源源不断地产生，但是日志队列中的日志数据消耗的较慢，从而导致日志队列始终处于已满状态，且存在许多待记录至日志队列的日志数据，若此现象长时间存在，将造成日志数据的拥堵和阻塞。当拥堵和阻塞的时间较长时，会造成业务消息的处理超时，严重时可能造成当前集群的业务中断，给用户带来不可逆的损失。

因此，如何避免日志存储过程中的拥堵和阻塞问题，是本领域技术人员需要解决的问题。

发明内容

本发明的目的在于提供一种日志存储方法、装置、设备及可读存储介质，以避免日志存储过程中的拥堵和阻塞问题。

为实现上述目的，本发明实施例提供了如下技术方案：

一种日志存储方法，包括：

获取待存储的日志数据，并标记所述日志数据的等级信息；

判断日志队列中的日志条数是否小于预设的队列阈值；

若否，则按照日志数据的等级信息和预设的存储配置在所述日志队列中确定冗余日志数据，并从所述日志队列中删除所述冗余日志数据；

将所述日志数据和所述日志数据的等级信息记录至所述日志队列，并依照所述日志队列将所述日志数据存入磁盘。

其中，所述从日志队列中删除冗余日志数据，包括：

按照所述日志队列中的日志数据的记录时间删除所述冗余日志数据。

其中，还包括：

当所述日志队列中的日志条数小于预设的队列阈值时，执行所述将所述日志数据和所述日志数据的等级信息记录至所述日志队列，并依照所述日志队列将所述日志数据存入磁盘的步骤。

其中，所述按照日志数据的等级信息和预设的存储配置在所述日志队列中确定冗余日志数据之前，还包括：

按照预设的上调规则上调所述队列阈值，并记录所述队列阈值的上调次数；

判断所述上调次数是否大于预设的上调阈值；

若是，则取消当前对所述队列阈值的上调，并执行所述按照日志数据的等级信息和预设的存储配置在所述日志队列中确定冗余日志数据，并从所述日志队列中删除所述冗余日志数据的步骤。

其中，还包括：