[发明专利]日志处理方法及分布式集群的计算设备在审
申请号: | 201510997709.8 | 申请日: | 2015-12-25 |
公开(公告)号: | CN105528454A | 公开(公告)日: | 2016-04-27 |
发明(设计)人: | 乔俊龙 | 申请(专利权)人: | 北京奇虎科技有限公司;奇智软件(北京)有限公司 |
主分类号: | G06F17/30 | 分类号: | G06F17/30 |
代理公司: | 北京智汇东方知识产权代理事务所(普通合伙) 11391 | 代理人: | 康正德;孙晓芳 |
地址: | 100088 北京市西城区新*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 日志 处理 方法 分布式 集群 计算 设备 | ||
技术领域
本发明涉及计算机技术领域,特别是涉及一种日志处理方法及分布式集群 的计算设备。
背景技术
日志文件是用于记录系统操作事件的记录文件或文件集合,操作系统有操 作系统日志文件,数据库系统有数据库系统日志文件。系统日志文件是包含关 于系统消息的文件,包括内核、服务、在系统上运行的应用程序等。数据库系 统日志文件为用事务日志文件记录数据的修改操作。
现有技术中,生成的日志文件均保存在本地,例如,计算设备上传文件或 者访问其他计算设备时生成的日志记录,该日志记录中包括上传路径、路由信 息等配置信息,将这些配置信息存储在本地,若本地存储设备出现问题,可能 会出现日志记录丢失或损坏的问题。
发明内容
鉴于上述问题,提出了本发明以便提供一种克服上述问题或者至少部分地 解决上述问题的日志处理方法及系统、分布式集群。
基于本发明的一个方面,提供了一种日志处理方法,应用于分布式集群的 计算设备,包括:
监控所述计算设备在设定时间内的执行动作;
根据所述计算设备的执行动作生成对应的至少一条日志记录;
将所述至少一条日志记录上传至分布式集群中预设的日志存储区。
可选地,在将所述至少一条日志记录上传至分布式集群中预设的日志存储 区的步骤之前,所述方法还包括:
自分布式集群中预设的配置信息存储区获取所述计算设备的配置信息,并 根据所述配置信息确定所述日志存储区的地址。
可选地,将所述至少一条日志记录上传至所述日志上传地址对应的日志存 储区,具体包括:
对所述至少一条日志记录按生成时间进行排序,得到排序后的日志记录队 列;
将所述日志记录队列依次上传至所述日志存储区。
可选地,若所述计算设备与所述分布式集群间的连接中断后再次连接,所 述方法还包括:
获取所述计算设备在中断期间生成的中断期日志记录;
对所述中断期日志记录按时间顺序进行排序;
将排序后的中断期日志记录按时间顺序依次上传至所述分布式集群。
可选地,不同计算设备的日志记录在所述日志存储区独立存储。
基于本发明的另一个方面,本发明实施例提供了一种分布式集群的计算设 备,包括:
监控模块,适于监控所述计算设备在设定时间内的执行动作;
日志生成模块,适于根据所述计算设备的执行动作生成对应的至少一条日 志记录;
上传模块,适于将所述至少一条日志记录上传至分布式集群中预设的日志 存储区。
可选的,上述计算设备还包括:
获取模块,适于自分布式集群中预设的配置信息存储区获取所述计算设备 的配置信息,并根据所述配置信息确定所述日志存储区的地址。
可选的,所述上传模块还适于:
对所述至少一条日志记录按生成时间进行排序,得到排序后的日志记录队 列;
将所述日志记录队列依次上传至所述日志存储区。
可选的,所述获取模块还适于若所述计算设备与所述分布式集群间的连接 中断后再次连接,获取所述计算设备在中断期间生成的中断期日志记录;
所述上传模块还适于对所述中断期日志记录按时间顺序进行排序;以及, 将排序后的中断期日志记录按时间顺序依次上传至所述分布式集群。
采用本发明实施例提供的方法,设定的时间内若监控到计算设备有执行动 作,根据执行动作生成对应的日志记录,并将日志记录上传至分布式集群,本 发明实施例是通过服务发现(监控)的方式通知进行日志的收集,因此,能够 及时收集计算设备执行动作对应的日志记录。另外,本发明实施例是将日志记 录上传至分布式集群,可以对日志记录集中操作,便于日志记录的管理,并且 分布式集群并非是单个计算设备,而是由若干个计算设备组成的用于存储的集 群,组成集群存储的每个存储系统的性能和容量均可通过集群的方式得以叠加 和扩展,若其中的一个存储设备出现问题,上传的日志记录可到其他通用的存 储设备中进行存储,提高了日志记录存储的安全性和容错性,避免了由于存储 设备出现问题造成的日志记录丢失或者损坏的问题。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京奇虎科技有限公司;奇智软件(北京)有限公司,未经北京奇虎科技有限公司;奇智软件(北京)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201510997709.8/2.html,转载请声明来源钻瓜专利网。