[发明专利]日志数据处理方法、系统、设备及介质在审
申请号: | 202110412210.1 | 申请日: | 2021-04-16 |
公开(公告)号: | CN113010399A | 公开(公告)日: | 2021-06-22 |
发明(设计)人: | 朱挺;唐锐华;陈汉;徐利平;李焜胤;陈国杰 | 申请(专利权)人: | 携程旅游网络技术(上海)有限公司 |
主分类号: | G06F11/34 | 分类号: | G06F11/34;G06F16/25;G06F16/21 |
代理公司: | 上海弼兴律师事务所 31283 | 代理人: | 杨东明;张冉 |
地址: | 200335*** | 国省代码: | 上海;31 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 日志 数据处理 方法 系统 设备 介质 | ||
1.一种日志数据处理方法,其特征在于,所述方法应用在日志存储系统中,所述日志存储系统包括列式数据库管理系统,所述方法包括:
从所述列式数据库管理系统中获取目标日志数据;
对所述目标日志数据采用预设管理方式进行处理以获取日志管理结果;
其中,所述预设管理方式对应IDC管理、NODE管理、集群管理、数据库管理、表结构管理、数据管道管理、账户管理、日志管理以及日志访问管理中的至少一种。
2.如权利要求1所述的日志数据处理方法,其特征在于,所述日志存储系统还包括日志数据预处理系统,所述方法还包括:
基于所述日志数据预处理系和所述列式数据库管理系统进行配置处理以获取配置结果;
其中,所述配置结果对应所述列式数据库管理系统中所述目标日志数据的生命全周期管理。
3.如权利要求2所述的日志数据处理方法,其特征在于,所述基于所述日志数据预处理系和所述列式数据库管理系统进行配置处理的步骤包括:
基于所述日志数据预处理系和所述列式数据库管理系统执行日志的接入申请、建表、配置、日志下线。
4.如权利要求3所述的日志数据处理方法,其特征在于,所述日志存储系统还包括展示系统,所述方法还包括:
基于所述展示系统展示所述目标日志数据;
和/或,
所述列式数据库管理系统包括Clickhouse集群管理系统。
5.一种日志数据处理系统,其特征在于,所述系统应用在日志存储系统中,所述日志存储系统包括列式数据库管理系统,所述系统包括:
获取模块,用于从所述列式数据库管理系统中获取目标日志数据;
处理模块,用于对所述目标日志数据采用预设管理方式进行处理以获取日志管理结果;
其中,所述预设管理方式对应IDC管理、NODE管理、集群管理、数据库管理、表结构管理、数据管道管理、账户管理、日志管理以及日志访问管理中的至少一种。
6.如权利要求5所述的日志数据处理系统,其特征在于,所述日志存储系统还包括日志数据预处理系统,所述系统还包括:
配置模块,用于基于所述日志数据预处理系和所述列式数据库管理系统进行配置处理以获取配置结果;
其中,所述配置结果对应所述列式数据库管理系统中所述目标日志数据的生命全周期管理。
7.如权利要求6所述的日志数据处理系统,其特征在于,所述配置模块包括执行单元;
执行单元,用于基于所述日志数据预处理系和所述列式数据库管理系统执行日志的接入申请、建表、配置、日志下线。
8.如权利要求7所述的日志数据处理系统,其特征在于,所述日志存储系统还包括展示系统,所述系统还包括:
所述展示系统采用展示模块,基于所述展示系统展示所述目标日志数据;
和/或,
所述列式数据库管理系统包括Clickhouse集群管理系统。
9.一种电子设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,其特征在于,所述处理器执行所述计算机程序时实现权利要求1-4中任一项所述的日志数据处理方法。
10.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现权利要求1-4中任一项所述的日志数据处理方法的步骤。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于携程旅游网络技术(上海)有限公司,未经携程旅游网络技术(上海)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110412210.1/1.html,转载请声明来源钻瓜专利网。
- 上一篇:丙烯酸酯压敏胶及其应用
- 下一篇:转子组件、电机和家用电器