[发明专利]通过访问日志统计用户访问数据的方法和装置有效
申请号: | 202010139572.3 | 申请日: | 2020-03-03 |
公开(公告)号: | CN113347052B | 公开(公告)日: | 2023-09-05 |
发明(设计)人: | 罗勋;王彪;李文利 | 申请(专利权)人: | 北京京东尚科信息技术有限公司;北京京东世纪贸易有限公司 |
主分类号: | H04L43/08 | 分类号: | H04L43/08;H04L67/1095;H04L67/06;H04L67/56;H04L67/02 |
代理公司: | 中原信达知识产权代理有限责任公司 11219 | 代理人: | 张一军;张效荣 |
地址: | 100086 *** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 通过 访问 日志 统计 用户 数据 方法 装置 | ||
1.一种通过访问日志统计用户访问数据的方法,其特征在于,包括:
利用反向代理节点接收并转发用户的访问请求,生成用户访问WEB应用的访问日志;每个反向代理节点配置以下信息:代理访问的域名、访问日志的生成路径和访问日志的格式;
将所述访问日志同步至日志分析节点;其中,采用第一定时任务对所述访问日志进行分割,将分割得到的日志文件移动到第一存储位置;采用第二定时任务将第一存储位置中存储的所述日志文件同步到所述日志分析节点;
根据同步至所述日志分析节点的日志文件,利用所述日志分析节点确定所述用户的访问数据;所述访问数据是根据用户访问记录、按照预设指标统计的指标值数据。
2.如权利要求1所述的方法,其特征在于,将所述访问日志同步至日志分析节点,包括:将每个反向代理节点生成的访问日志分别同步至一个日志分析节点,或者,将多个反向代理节点生成的访问日志同步至同一个日志分析节点。
3.如权利要求1所述的方法,其特征在于,根据同步至所述日志分析节点的日志文件,利用所述日志分析节点确定所述用户的访问数据,包括:
将同步至所述日志分析节点的日志文件放入任务队列;
对于所述任务队列中的任一日志文件,从所述任一日志文件中解析预设访问信息,以所述访问信息的全部或者至少一部分为键、以所述任一日志文件作为值,生成与所述任一日志文件对应的日志记录;
根据预设时段内每个日志文件对应的日志记录确定所述用户的访问数据。
4.如权利要求3所述的方法,其特征在于,将同步至所述日志分析节点的日志文件放入任务队列之前,还包括:确认所述日志文件不具有预设标识;
将同步至所述日志分析节点的日志文件放入任务队列之后,还包括:为所述日志文件添加所述预设标识。
5.如权利要求3所述的方法,其特征在于,根据预设时段内每个日志文件对应的日志记录确定所述用户的访问数据之后,还包括:
将所述预设时段内的每个日志文件从所述任务队列中删除,并将所述预设时段内每个日志文件对应的日志记录写入消息队列;利用数据库存储节点将写入所述消息队列中的所有日志记录批量保存至数据库。
6.一种通过访问日志统计用户访问数据的装置,其特征在于,包括:
反向代理模块,利用反向代理节点接收并转发用户的访问请求,生成用户访问WEB应用的访问日志;每个反向代理节点配置以下信息:代理访问的域名、访问日志的生成路径和访问日志的格式;
日志收集模块,将所述访问日志同步至日志分析节点;其中,采用第一定时任务对所述访问日志进行分割,将分割得到的日志文件移动到第一存储位置;采用第二定时任务将第一存储位置中存储的所述日志文件同步到所述日志分析节点;
日志分析模块,根据同步至所述日志分析节点的日志文件,利用所述日志分析节点确定所述用户的访问数据;所述访问数据是根据用户访问记录、按照预设指标统计的指标值数据。
7.一种通过访问日志统计用户访问数据的电子设备,其特征在于,包括:
一个或多个处理器;
存储装置,用于存储一个或多个程序,
当所述一个或多个程序被所述一个或多个处理器执行,使得所述一个或多个处理器实现如权利要求1-5中任一所述的方法。
8.一种计算机可读介质,其上存储有计算机程序,其特征在于,所述程序被处理器执行时实现如权利要求1-5中任一所述的方法。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京京东尚科信息技术有限公司;北京京东世纪贸易有限公司,未经北京京东尚科信息技术有限公司;北京京东世纪贸易有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010139572.3/1.html,转载请声明来源钻瓜专利网。