[发明专利]日志落地方法及装置在审
申请号: | 201711489249.3 | 申请日: | 2017-12-29 |
公开(公告)号: | CN110019045A | 公开(公告)日: | 2019-07-16 |
发明(设计)人: | 严锁鹏 | 申请(专利权)人: | 北京奇虎科技有限公司 |
主分类号: | G06F16/17 | 分类号: | G06F16/17 |
代理公司: | 北京智汇东方知识产权代理事务所(普通合伙) 11391 | 代理人: | 康正德;陈智勇 |
地址: | 100088 北京市西城区新*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 日志 落地 日志访问 配置文件 配置信息 日志类别 接收业务 业务访问 业务接入 解析 写入 携带 重复 访问 | ||
本发明提供了一种日志落地方法及装置,该方法包括:接收业务的日志访问请求,所述日志访问请求中携带有所需访问的日志类别以及至少一个目标落地组件;解析所述日志访问请求,根据所述日志类别确定所述业务访问的日志属于已消费日志;根据所述目标落地组件的类型在所述日志的配置文件中添加所述目标落地组件的配置信息,将所述日志写入所述目标落地组件中,完成日志落地。基于本发明提供的日志落地方法,对于将已消费日志落地至新落地组件时,只需在日志的配置文件中增加需要落地的目标落地组件的配置信息即可实现日志的落地,可以避免对同一份日志的重复消费,快速并有效为业务将日志落地到组件中,进而提升业务接入的效率。
技术领域
本发明涉及计算机技术领域,特别是涉及一种日志落地方法及装置。
背景技术
随着计算机技术的不断发展,各种数据的存储量及计算量也越来越大。面对日益庞大的数据量,当业务需要进行数据访问时,如何有效且快速的为各业务写入其所需要日志数据则为亟待解决的问题。
传统技术中,数据库集群接收到数据访问请求时,需要将数据日志落地到各自的目标系统中,如果不同的目标系统对日志的需求的相同的话,数据库集群则需要对每个目标系统都要实现相关的代码,并且会重复开发,对日志进行重复消费。采用上述方式不仅会造成浪费资源,还会降低数据访问效率,减缓系统的运行速度。
发明内容
本发明提供了一种日志落地方法及装置以克服上述问题或者至少部分地解决上述问题。
根据本发明的一个方面,提供了一种日志落地方法,包括:
接收业务的日志访问请求,所述日志访问请求中携带有所需访问的日志类别以及至少一个目标落地组件;
解析所述日志访问请求,根据所述日志类别确定所述业务访问的日志属于已消费日志;
根据所述目标落地组件的类型在所述日志的配置文件中添加所述目标落地组件的配置信息,将所述日志写入所述目标落地组件中,完成日志落地。
可选地,所述解析所述日志访问请求,根据所述日志类别确定所述业务访问的日志属于已消费日志,包括:
解析所述日志访问请求,获取所述日志访问请求中携带的日志类别,判断该日志类别是否存在于预设日类别列表中;
若是,则确定所述业务访问的日志属于已消费日志。
可选地,所述解析所述日志访问请求,获取所述日志类别,判断该日志类别是否存在于预设日类别列表中之后,还包括:
若否,则确定所述业务访问的日志属于未消费日志;
将所述日志类别添加至所述预设日志类别列表中,并从指定集群中消费日志。
可选地,所述将所述日志类别添加至所述预设日志类别列表中,并从指定集群中消费日志,包括:
在所述预设日志类别列表中添加所述日志类别相应的字段信息;
从指定集群中收集与所述日志类别对应的日志信息。
可选地,所述根据所述目标落地组件的类型在所述日志的配置文件中添加所述目标落地组件的配置信息,将所述日志写入所述目标落地组件中,完成日志落地,包括:
在所述日志的配置文件中指定的落地组件命令中添加所述目标落地组件的字段信息;
根据所述目标落地组件的类型确定该目标落地组件实现日志落地所需的基本配置信息;
在所述配置文件中添加所述目标落地组件的基本配置信息,以提供所述目标落地组件的访问接口,将所述日志写入所述目标落地组件中,完成日志落地。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京奇虎科技有限公司,未经北京奇虎科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201711489249.3/2.html,转载请声明来源钻瓜专利网。
- 上一篇:大数据集群准实时Yarn任务监控分析方法
- 下一篇:一种日志落地方法及装置