[发明专利]一种分布式日志收集方法有效
申请号: | 201710654304.3 | 申请日: | 2017-08-03 |
公开(公告)号: | CN107590182B | 公开(公告)日: | 2020-06-19 |
发明(设计)人: | 向友君;何家成;张勰;朱叶;吴宗泽 | 申请(专利权)人: | 华南理工大学 |
主分类号: | G06F16/17 | 分类号: | G06F16/17;G06F16/215;G06F16/25;G06Q30/02 |
代理公司: | 广州市华学知识产权代理有限公司 44245 | 代理人: | 李斌 |
地址: | 510640 广*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明公开了一种分布式的日志收集方法,包括:采用双缓冲机制对日志数据进行收集;采用基于主/从Reactor模式对日志数据进行分级转发;采用LVS+Keepalived模式将并发的业务请求合理分配给各服务节点;采用基于Flume NG复合双通道对日志数据进行清洗、过滤;最终对日志数据进行读取。相较于传统日志收集方法,本分布式日志收集方法创新性地提出基于双缓冲机制的非阻塞日志收集方案、基于主/从Reactor模式的分级日志转发方案、基于Flume NG复合双通道的日志系统与数据清洗平台方案,使得系统对日志的收集效率更高,并且收集并落地存储的日志数据更加符合分析人员的需求,降低后期数据分析的时间成本。 | ||
搜索关键词: | 一种 分布式 日志 收集 方法 | ||
【主权项】:
一种分布式日志收集方法,其特征在于,所述方法包括下列步骤:业务系统产生日志数据;采用双缓冲机制对日志数据进行收集;采用LVS+Keepalived模式将并发的业务请求合理分配给各服务节点;采用基于主/从Reactor模式对日志数据进行分级转发;采用基于Flume NG复合双通道对日志数据进行清洗、过滤;对日志数据进行读取。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于华南理工大学,未经华南理工大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201710654304.3/,转载请声明来源钻瓜专利网。
- 上一篇:一种用于重金属污染土壤治理的装置
- 下一篇:一种深入型土壤治理装置