[发明专利]一种访问日志的处理方法、装置、计算机设备和存储介质在审
申请号: | 202111477921.3 | 申请日: | 2021-12-06 |
公开(公告)号: | CN114168557A | 公开(公告)日: | 2022-03-11 |
发明(设计)人: | 刘榆厚;王炜 | 申请(专利权)人: | 广东飞翔云计算有限公司 |
主分类号: | G06F16/182 | 分类号: | G06F16/182;G06F16/18;G06F16/335;G06F16/35;G06F16/958 |
代理公司: | 北京品源专利代理有限公司 11332 | 代理人: | 孔凡红 |
地址: | 514000 广东省梅州市梅江区三*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明提供了一种访问日志的处理方法、装置、计算机设备和存储介质,该方法包括:采集网站服务器在用户访问页面时生成的日志文件,识别日志文件中所包含的数据的维度,针对每个维度生成一个或多个分布式计算节点,当接收到统计任务时,将统计任务拆分为多个维度、以组成链路,按照链路的顺序依次在分布式计算节点中对日志文件聚类,获得日志簇,对日志簇中的日志文件进行统计,获得统计结果,将统计结果存储至分布式文件系统中,实现了分布式系统Hadoop实时对日志文件聚类,在维度上对日志文件进行聚类,可以忽略不同统计任务之间的业务差别,大大提高了适用性,无需频繁生成线程,避免了内存溢出。 | ||
搜索关键词: | 一种 访问 日志 处理 方法 装置 计算机 设备 存储 介质 | ||
【主权项】:
暂无信息
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于广东飞翔云计算有限公司,未经广东飞翔云计算有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/202111477921.3/,转载请声明来源钻瓜专利网。