[发明专利]日志处理方法及装置在审
申请号: | 201911266281.4 | 申请日: | 2019-12-11 |
公开(公告)号: | CN111026613A | 公开(公告)日: | 2020-04-17 |
发明(设计)人: | 王俊明;张芳志;黄冲;黄大正 | 申请(专利权)人: | 人教数字出版有限公司 |
主分类号: | G06F11/30 | 分类号: | G06F11/30 |
代理公司: | 北京集佳知识产权代理有限公司 11227 | 代理人: | 李伟 |
地址: | 100081 北京市*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 日志 处理 方法 装置 | ||
本申请公开了一种日志处理方法及装置,该方法包括:获取原始日志,依据预设的数据划分方式,对原始日志进行划分,获得原始日志对应的多个日志块,针对每个日志块,确定与日志块对应的多个预设指标,从日志块中提取与每个预设指标对应的日志数据,将提取出的各个日志数据对应写入预设日志模板中,得到目标日志。应用本发明提供的日志处理方法,针对不同的原始日志,从原始日志中提取出相应的日志数据写入预设日志模板中,实现对原始日志进行规范化处理,得到规范化的日志,从而实现采用统一的链路可识别不同的日志,降低开发成本。
技术领域
本发明涉及信息技术领域,尤其涉及一种日志处理方法及装置。
背景技术
目前大数据成为当前业界的技术热点,特别是随着云计算业务的部署,大数据作为其最重要的业务应用,其发展前景被寄予厚望。
大数据的业务往往涉及多个产品项目,不同产品项目,其所产生的原始日志是不同的,而不同原始日志中的日志字段和表达也是不同的。现有技术中,日志接入系统只能对原有的产品项目的原始日志进行识别处理,当有新的产品项目的原始日志接入时,需要重新开发一套能识别该原始日志的日志字段和表达的链路,导致开发成本较大。
发明内容
本发明所要解决的技术问题是提供一种日志处理方法,以实现当新的产品项目的原始日志接入时,可以复用原有的链路,无需重新开发识别该原始日志的链路,从而降低开发成本。
本发明还提供了一种日志处理装置,用于保证上述方法在实际中的实现及应用。
一种日志处理方法,包括:
获取原始日志;
依据预设的数据划分方式,对所述原始日志进行划分,获得所述原始日志对应的多个日志块;
针对每个所述日志块,确定与所述日志块对应的多个预设指标,从所述日志块中提取与每个所述预设指标对应的日志数据;
将提取出的各个所述日志数据对应写入预设日志模板中,得到目标日志。
上述的方法,可选的,所述依据预设的数据划分方式,对所述原始日志进行划分,获得所述原始日志对应的多个日志块,包括:
获取预设的多个要素信息;
依据各个所述要素信息,对所述原始日志进行划分,得到所述原始日志对应的多个日志块,其中,每个所述要素信息对应一个所述日志块。
上述的方法,可选的,所述确定与所述日志块对应的多个预设指标,包括:
依据所述日志块对应的要素信息,获取与所述要素信息对应的多个预设指标;
将与所述要素信息对应的多个预设指标,确定为所述日志块对应的多个预设指标。
上述的方法,可选的,所述将提取的各个所述日志数据对应写入预设日志模板中,得到目标日志,包括:
依据每个所述日志数据对应的预设指标,在预设日志模板中,确定与所述预设指标对应的写入位置;
将每个所述日志数据写入与其对应的写入位置中,得到目标日志。
上述的方法,可选的,所述将提取的各个日志数据对应写入预设日志模板中,得到目标日志之后,还包括:
将所述目标日志进行存储。
一种日志处理装置,包括:
获取单元,用于获取原始日志;
划分单元,用于依据预设的数据划分方式,对所述原始日志进行划分,获得所述原始日志对应的多个日志块;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于人教数字出版有限公司,未经人教数字出版有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201911266281.4/2.html,转载请声明来源钻瓜专利网。