[发明专利]一种基于日志分析的数据库三层关联的识别方法有效
申请号: | 202010611005.3 | 申请日: | 2020-06-30 |
公开(公告)号: | CN111752727B | 公开(公告)日: | 2023-06-20 |
发明(设计)人: | 王启凡;陶景龙;梁淑云;刘胜;马影;魏国富;殷钱安;余贤喆;周晓勇 | 申请(专利权)人: | 上海观安信息技术股份有限公司 |
主分类号: | G06F9/54 | 分类号: | G06F9/54;G06F16/242;G06F16/25;G06F16/28 |
代理公司: | 合肥市浩智运专利代理事务所(普通合伙) 34124 | 代理人: | 张祥 |
地址: | 200333 上海市浦东新*** | 国省代码: | 上海;31 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 基于 日志 分析 数据库 三层 关联 识别 方法 | ||
1.一种基于日志分析的数据库三层关联识别方法,其特征在于:包括以下步骤:
步骤1:提取总时长为t总的时间段内的前台操作日志request日志和数据库操作日志sql日志,定义表K为空表;
步骤2:基于操作请求的类别剔除无关操作请求;
步骤3:将request日志和sql日志中的参数移除,提取去参后的request日志主体对象和sql日志主体对象;
步骤4:以固定的时间间隔将时长为t总的日志数据划分为连续的时间段,统计request日志主体对象和sql日志主体对象在每个时间段的操作次数得到表T;
步骤5:计算request日志主体对象与sql日志主体对象的相关率;
步骤6:重复步骤4-5,以多种预设的时间间隔划分时间轴,获取不同时间间隔下的每一个request日志主体对象与每一个sql日志主体对象的相关率,保留相关率最大值,记录总时长t总,得到表G;
步骤7:如果表K为空表,则令表K=表G;执行步骤8,否则直接执行步骤8;
步骤8:根据表G和表K的内容更新每个request日志主体对象与每个sql日志主体对象的相关率,并将结果更新到表K中;
步骤9:在待预测数据的request日志中,解析传递参数,提取请求内容中符合“=*”匹配的参数;在sql日志中,提取sql语句中符合“=*”匹配的参数;
步骤10:基于步骤9提取的参数,计算参数相关值;
步骤11:对每一个sql日志,按照参数相关值和相关率对request日志进行排序,取排名最高的前N个request日志主体对象作为与该sql日志主体对象可能有关系的对象;即得到数据库的三层关联。
2.根据权利要求1所述的一种基于日志分析的数据库三层关联识别方法,其特征在于:步骤1中所述的request日志包括请求、请求内容、时间戳;sql日志包括sql语句和操作时间。
3.根据权利要求2所述的一种基于日志分析的数据库三层关联识别方法,其特征在于:步骤2中剔除无关操作请求的方法为:对request日志,剔除掉后缀为css,js,jpg,gif,ico,png的请求;对sql操作日志,剔除掉commit记录。
4.根据权利要求1所述的一种基于日志分析的数据库三层关联识别方法,其特征在于:步骤3中将request日志的请求的参数替换成符号?,将请求内容中的参数替换成?,将替换后的请求和请求内容合并得到request日志主体对象。
5.根据权利要求4所述的一种基于日志分析的数据库三层关联识别方法,其特征在于:步骤3中将sql日志中的参数替换成符号?,替换后的sql语句为sql日志主体对象。
6.根据权利要求1所述的一种基于日志分析的数据库三层关联识别方法,其特征在于:步骤4中统计每个时间段主体对象的操作次数得到表T,表T的内容如下:
T(request):request日志主体对象、第一个时间段t1的操作次数R1、第二个时间段t2的操作次数R2、······、第i个时间段ti的操作次数Ri;其中i∈[1,n],n为总的时间段数;
T(sql):sql日志主体对象,第一个时间段t1的操作次数S1、第二个时间段t2的操作次数S2、······、第i个时间段ti的操作次数Si。
7.根据权利要求6所述的一种基于日志分析的数据库三层关联识别方法,其特征在于:
步骤5所述的计算相关率η的方法为:
步骤6中预设的时间间隔分别为3s、5s和7s,分别计算获得不同时间间隔下request日志主体对象和sql日志主体对象的相关率。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于上海观安信息技术股份有限公司,未经上海观安信息技术股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010611005.3/1.html,转载请声明来源钻瓜专利网。