[发明专利]一种云平台日志暴增的检测方法、装置、设备、存储介质在审
申请号: | 202111358487.7 | 申请日: | 2021-11-16 |
公开(公告)号: | CN114138620A | 公开(公告)日: | 2022-03-04 |
发明(设计)人: | 逄立业 | 申请(专利权)人: | 苏州浪潮智能科技有限公司 |
主分类号: | G06F11/34 | 分类号: | G06F11/34 |
代理公司: | 济南舜源专利事务所有限公司 37205 | 代理人: | 孙玉营 |
地址: | 215100 江苏省苏州*** | 国省代码: | 江苏;32 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 平台 日志 检测 方法 装置 设备 存储 介质 | ||
1.一种云平台日志暴增的检测方法,其特征在于,包括如下步骤:
将日志按小时粒度提取进行存储,生成单位小时日志条数的时序数据;
读取第一阈值天数的时序数据,并判断读取的时序数据是否完整;
当读取的时序数据完整时,进行日志条数的处理检测,当判定日志暴增时,将判定结果存入消息队列;
订阅消息队列的日志暴增检测主题,当该主题中产生数据时,生成告警通知。
2.根据权利要求1所述的云平台日志暴增的检测方法,其特征在于,将日志按小时粒度提取进行存储,生成单位小时日志条数的时序数据的步骤包括:
遍历日志目录中的所有文件,对每一个文件筛选上一小时的数据并统计条数;
对所有文件的日志条数统计求和,将结果存入到数据库中,生成每小时的日志条数的时序数据。
3.根据权利要求2所述的云平台日志暴增的检测方法,其特征在于,读取第一阈值天数的时序数据,并判断读取的时序数据是否完整的步骤包括:
读取第一阈值天数的时序数据;
判断读取的第一阈值天数的时序数据的小时数是否大于实际点数的第四百分比;其中实际点数为第一阈值乘以24小时;
若是,判断第二阈值百分比的时序数据的行数是否大于第三阈值;
若是,判断时序数据完整;执行步骤进行日志条数的处理检测,当判定日志暴增时,将判定结果存入消息队列;
否则,本次检测结束。
4.根据权利要求3所述的云平台日志暴增的检测方法,其特征在于,进行日志条数的处理检测,当判定日志暴增时,将判定结果存入消息队列的步骤包括:
分别调用统计方法、指数移动加权平均法、多项式回归方法进行日志条数的处理检测;
当两种或两种以上方法输出日志异常时,判定日志暴增并将判定结果存入消息队列。
5.一种云平台日志暴增的检测装置,其特征在于,包括日志时序数据提取模块、时序数据预处理模块、检测模块、告警通知生成模块;
日志时序数据提取模块,用于将日志按小时粒度提取进行存储,生成单位小时日志条数的时序数据;
时序数据预处理模块,用于读取第一阈值天数的时序数据,并判断读取的时序数据是否完整;
检测模块,用于当读取的时序数据完整时,进行日志条数的处理检测,当判定日志暴增时,将判定结果存入消息队列;
告警通知生成模块,用于订阅消息队列的日志暴增检测主题,当该主题中产生数据时,生成告警通知。
6.根据权利要求5所述的云平台日志暴增的检测装置,其特征在于,日志时序数据提取模块包括提取单元和生成单元;
提取单元,用于遍历日志目录中的所有文件,对每一个文件筛选上一小时的数据并统计条数;
生成单元,用于对所有文件的日志条数统计求和,将结果存入到数据库中,生成每小时的日志条数的时序数据。
7.根据权利要求6所述的云平台日志暴增的检测装置,其特征在于,时序数据预处理模块包括读取单元、第一判断单元、第二判断单元;
读取单元,用于读取第一阈值天数的时序数据;
第一判断单元,用于判断读取的第一阈值天数的时序数据的小时数是否大于实际点数的第四百分比;其中实际点数为第一阈值乘以24小时;
第二判断单元,用于判断第二阈值百分比的时序数据的行数是否大于第三阈值。
8.根据权利要求7所述的云平台日志暴增的检测装置,其特征在于,检测模块,具体用于分别调用统计方法、指数移动加权平均法、多项式回归方法进行日志条数的处理检测;当两种或两种以上方法输出日志异常时,判定日志暴增并将判定结果存入消息队列。
9.一种计算机设备,其特征在于,包括处理器和存储器,所述处理器和所述存储器通过总线完成相互间的通信;所述存储器存储有可被所述处理器执行的程序指令,所述处理器调用所述程序指令能够执行如权利要求1至4任一项权利要求所述的云平台日志暴增的检测方法。
10.一种非暂态计算机可读存储介质,其特征在于,所述非暂态计算机可读存储介质存储计算机指令,所述计算机指令使所述计算机执行如权利要求1至4任一项权利要求所述的云平台日志暴增的检测方法。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于苏州浪潮智能科技有限公司,未经苏州浪潮智能科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202111358487.7/1.html,转载请声明来源钻瓜专利网。