[发明专利]一种日志采集方法及相关装置在审
申请号: | 202110856520.2 | 申请日: | 2021-07-28 |
公开(公告)号: | CN113688002A | 公开(公告)日: | 2021-11-23 |
发明(设计)人: | 贾思瑞 | 申请(专利权)人: | 济南浪潮数据技术有限公司 |
主分类号: | G06F11/30 | 分类号: | G06F11/30;G06F16/18 |
代理公司: | 北京集佳知识产权代理有限公司 11227 | 代理人: | 丁曼曼 |
地址: | 250101 山东省济南市自由贸易试验区*** | 国省代码: | 山东;37 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 日志 采集 方法 相关 装置 | ||
本申请公开了一种日志采集方法,包括:根据目标容器的日志路径确定容器日志信息;根据所述容器日志信息从日志采集模板库中匹配对应的日志解析规则;根据所述日志解析规则生成对应的配置文件;根据所述配置文件对所述目标容器进行日志采集。通过目标容器的日志路径确定对应的容器日志信息,然后在模板库中匹配日志解析规则,最后根据该日志解析规则生成对应的配置文件,实现对容器进行自动化的配置文件生成过程,而不需要人工手动生成对应的配置文件,降低人工成本,提高了日志采集的效率。本申请还公开了一种日志采集装置、服务器以及计算机可读存储介质,具有以上有益效果。
技术领域
本申请涉及计算机技术领域,特别涉及一种日志采集方法、日志采集装置、服务器以及计算机可读存储介质。
背景技术
随着云平台技术的不断发展,出现了容器技术,降低了应用管理难度。在云平台运行了大量的容器实例,容器实例随时被创建调度在不同的集群机器之上。当业务出现问题的时候,技术人员需要查看应用打出的日志进行定位排查,但是日志分布在不同的位置,很难进行查看搜索,因此需要统一的日志管理平台来管理日志。
相关技术中,EFK(Elasticsearch Kibana Fluentd)技术栈可进行日志的集中收集与展示,Elasticsearch用于数据的存储,Kibana用于日志的展示,Fluentd用于日志的收集。其中,Fluentd作为日志收集工具,有很多的日志采集插件,可采集各种日志。但是Fluentd的采集哪个路径下的日志由配置文件决定,每次启动之前都需要固定采集的日志文件的路径,面对kubenates下管理的docker容器日志能力不足,如果动态的添加或删除掉容器,收集的文件路径会动态的调整,需要人工手动对配置文件执行调整操作,才能在变动之后对容器进行正常的日志收集操作,增加了人工成本,降低了日志收集的效率。
因此,如何提高对于容器进行日志收集操作的效率,降低人工成本是本领域技术人员关注的重点问题。
发明内容
本申请的目的是提供一种日志采集方法、日志采集装置、服务器以及计算机可读存储介质,降低对于容器日志进行收集操作的人工成本,提高日志收集操作的效率。
为解决上述技术问题,本申请提供一种日志采集方法,包括:
根据目标容器的日志路径确定容器日志信息;
根据所述容器日志信息从日志采集模板库中匹配对应的日志解析规则;
根据所述日志解析规则生成对应的配置文件;
根据所述配置文件对所述目标容器进行日志采集。
可选的,根据目标容器的预设路径确定容器日志信息,包括:
当创建新的容器时,将所述新的容器作为所述目标容器;
根据所述目标容器的ID确定所述日志路径;
将所述目标容器的ID、容器信息以及所述日志路径进行组合,得到所述容器日志信息。
可选的,根据目标容器的预设路径确定容器日志信息,包括:
获取所有容器列表,并将所述所有容器列表中的容器作为目标容器;
根据每个所述目标容器的ID确定对应所述日志路径;
将每个所述目标容器的ID、容器信息以及所述日志路径进行组合,得到对应的所述容器日志信息。
可选的,获取所有容器列表,包括:
通过dockerAPI获取所述所有容器列表。
可选的,还包括:
按照预设周期判断是否出现删除容器事件;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于济南浪潮数据技术有限公司,未经济南浪潮数据技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110856520.2/2.html,转载请声明来源钻瓜专利网。