[发明专利]一种物联网云容器日志收集方法及装置有效
申请号: | 202110566833.4 | 申请日: | 2021-05-24 |
公开(公告)号: | CN113391973B | 公开(公告)日: | 2022-11-25 |
发明(设计)人: | 王伟楠 | 申请(专利权)人: | 青岛海信智慧生活科技股份有限公司 |
主分类号: | G06F11/30 | 分类号: | G06F11/30;G06F16/18;G06F9/455 |
代理公司: | 北京同达信恒知识产权代理有限公司 11291 | 代理人: | 望紫薇 |
地址: | 266101 山*** | 国省代码: | 山东;37 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 联网 容器 日志 收集 方法 装置 | ||
1.一种物联网云容器日志收集方法,其特征在于,包括:
监听消息队列模块中应用的第一主题获取应用的日志数据及所述应用的第二主题获取所述应用的日志规则,所述应用会单独将日志目录挂载到物理节点的不同目录,用日志收集工具将日志目录下的日志文件异步传输给基于卡夫卡集群的消息队列模块,每种应用对应一个属于自己的第一主题,每个应用对应一个日志规则,所述日志规则由应用的标准格式和字段的值或字符配置的;
将所述日志数据依据预设的标准格式和字段进行标准化处理,得到标准格式的日志数据;
确定内存中是否存储所述应用的日志规则,若是,则依据所述日志规则对所述标准格式的日志数据进行处理;
其中,依据所述日志规则对所述标准格式的日志数据进行处理,包括:若所述标准格式的日志数据符合所述日志规则,则将所述标准格式的日志数据写回所述消息队列模块中,监听所述消息队列模块并将标准格式日志按应用分表落盘数据仓库;否则不处理所述标准格式的日志数据;
监听所述消息队列模块中所述应用的第二主题获取所述应用的日志规则;
确定内存中是否存储所述应用的日志规则,若是,则在确定所述应用的日志规则的ID小于监听到的日志规则的ID时,将所述监听到的日志规则的ID更新到所述内存中。
2.如权利要求1所述的方法,其特征在于,所述方法还包括:
若确定所述内存中未存储所述应用的日志规则,则不对所述标准格式的日志数据进行落盘。
3.一种物联网云容器日志收集装置,其特征在于,包括:
获取单元,用于
监听消息队列模块中应用的第一主题获取应用的日志数据及所述应用的第二主题获取所述应用的日志规则,所述应用会单独将日志目录挂载到物理节点的不同目录,用日志收集工具将日志目录下的日志文件异步传输给基于卡夫卡集群的消息队列模块,每种应用对应一个属于自己的第一主题,每个应用对应一个日志规则,所述日志规则由应用的标准格式和字段的值或字符配置的;
处理单元,用于将所述日志数据依据预设的标准格式和字段进行标准化处理,得到标准格式的日志数据;确定内存中是否存储所述应用的日志规则,若是,则依据所述日志规则对所述标准格式的日志数据进行处理;所述处理单元具体用于:
若所述标准格式的日志数据符合所述日志规则,则将所述标准格式的日志数据写回所述消息队列模块中,监听所述消息队列模块并将标准格式日志按应用分表落盘数据仓库;否则不处理所述标准格式的日志数据;
所述获取单元,还用于:
监听所述消息队列模块中所述应用的第二主题获取所述应用的日志规则;
所述处理单元,还用于:
确定内存中是否存储所述应用的日志规则,若是,则在确定所述应用的日志规则的ID小于监听到的日志规则的ID时,将所述监听到的日志规则的ID更新到所述内存中。
4.如权利要求3所述的装置,其特征在于,所述处理单元还用于:
若确定所述内存中未存储所述应用的日志规则,则不对所述标准格式的日志数据进行落盘。
5.一种计算设备,其特征在于,包括:
存储器,用于存储程序指令;
处理器,用于调用所述存储器中存储的程序指令,按照获得的程序执行权利要求1至2任一项所述的方法。
6.一种计算机可读非易失性存储介质,其特征在于,包括计算机可读指令,当计算机读取并执行所述计算机可读指令时,使得计算机执行如权利要求1至2任一项所述的方法。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于青岛海信智慧生活科技股份有限公司,未经青岛海信智慧生活科技股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110566833.4/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种脑血流自主调节能力评估方法
- 下一篇:手术工具