[发明专利]一种数据库日志文件处理方法及系统

说明书

本发明公开了一种数据库日志文件处理方法及系统，该方法包括：监听第一数据库日志文件的大小，判断第一数据库日志文件的大小是否超过第一预设阈值；在第一数据库日志文件的大小超过第一预设阈值的情况下，对第一数据库日志文件进行闭锁，并在预设时间启动预先配置的定时任务；判断第一数据库日志文件是否满足切割归档条件；在第一数据库日志文件满足切割归档条件的情况下，确定第一数据库日志文件的日志类型，并根据日志类型对第一数据库日志文件进行切割归档处理。本发明保证在不影响数据库在线实时业务的情况下进行大日志文件的切割和归档，实现对线上运行的数据库进行标准化、自动化日志切割归档，极大的提高了数据库稳定性。

技术领域

本发明涉及计算机技术领域，具体涉及一种数据库日志文件处理方法及系统。

背景技术

数据库的日志管理是数据库运维的重要部分。以支付清算平台为例，由于实时业务的交易数据均存储在MySQL数据库中，因此，在实施业务不间断运行、交易量巨大的情况下，MySQL日志也随之快速增长。大容量的日志文件会导致磁盘空间占用率过高，IO吞吐资源消耗过大，业务处理资源受损等问题，因此，需要对日志进行管理。

发明内容

有鉴于此，本发明实施例提供了一种数据库日志文件处理方法及系统，解决现有技术中由于数据库上线后会产生大日志文件，导致磁盘空间占用率过高，IO吞吐资源消耗过大，业务处理资源受损的问题。

为达到上述目的，本发明提供如下技术方案：

第一方面，本发明实施例提供一种数据库日志文件处理方法，包括：监听第一数据库日志文件大小，判断所述第一数据库日志文件的大小是否超过第一预设阈值；在所述第一数据库日志文件的大小超过所述第一预设阈值的情况下，对所述第一数据库日志文件进行闭锁，并在预设时间启动预先配置的定时任务，所述预设时间表示允许对数据库日志文件进行切割归档处理的时间，所述定时任务用于定时切割归档数据库日志文件；判断所述第一数据库日志文件是否满足切割归档条件；在所述第一数据库日志文件满足切割归档条件的情况下，确定所述第一数据库日志文件的日志类型，并根据所述日志类型对所述第一数据库日志文件进行切割归档处理。

在一实施例中，所述根据所述日志类型对所述第一数据库日志文件进行切割归档处理，包括：确定所述日志类型对应的切割归档函数；利用所述切割归档函数对所述第一数据库日志文件进行切割归档，输出目标日志文件。

在一实施例中，在确定所述日志类型对应的切割归档函数之后，在利用所述切割归档函数对所述第一数据库日志文件进行切割归档之前，还包括：获取会话级别的日志，判断所述会话级别的日志是否开启；当所述会话级别的日志开启时，关闭会话级别的日志。

在一实施例中，所述利用所述切割归档函数对所述第一数据库日志文件进行切割归档，输出目标日志文件，包括：生成唯一对应所述第一数据库日志文件的日志名称；根据所述日志名称建立归档目录；将日志文件移动到所述归档目录下，对所述第一数据库日志文件进行切割归档，输出目标日志文件。

在一实施例中，所述判断所述第一数据库日志文件是否满足切割归档条件，包括：判断数据库的磁盘剩余空间是否小于第二预设阈值；在所述数据库的磁盘剩余空间小于所述第二预设阈值的情况下，判定结果为所述第一数据库日志文件满足切割归档条件。

在一实施例中，本发明实施例提供的数据库日志文件处理方法，还包括：在所述第一数据库日志文件不满足切割归档条件的情况下，生成所述第一数据库日志文件切割归档失败的标志文件，并发送所述第一数据库日志文件切割归档失败的消息至数据库管理后台。

在一实施例中，在所述第一数据库日志文件的大小超过所述第一预设阈值的情况下，所述数据库日志文件处理方法还包括：发送所述第一数据库日志文件已经闭锁的信息至数据库管理后台并建立第二数据库日志文件，所述第二数据库日志文件用于记录在所述第一数据库日志文件闭锁的情况下产生的日志。