[发明专利]一种快速从大批量压缩文件中提取日志的方法有效
申请号: | 201910204047.2 | 申请日: | 2019-03-18 |
公开(公告)号: | CN109960630B | 公开(公告)日: | 2020-09-29 |
发明(设计)人: | 周杰;贾川江 | 申请(专利权)人: | 四川长虹电器股份有限公司 |
主分类号: | G06F11/30 | 分类号: | G06F11/30;G06F16/17 |
代理公司: | 四川省成都市天策商标专利事务所 51213 | 代理人: | 李洁 |
地址: | 621000 四*** | 国省代码: | 四川;51 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明公开了一种快速从大批量压缩文件中提取日志的方法,包括步骤1:根据各个压缩文件名和节点数计算出每个压缩文件的散列因子;步骤2:计算各个节点资源情况开启多进程,每个节点多进程开启前先计算CPU使用情况;步骤3:在多进程工作模式下递归解压,并将遇到的压缩文件一并解压;步骤4:多进程模式下,利用文件处理利器提取解压后的文件夹中各个文件的关键信息,用关键字作为文本的字段或者记录分隔符提取出关键信息。为所有的压缩文件按顺序附上散列因子,然后根据服务器节点开启多进程,在多进程的工作模式下服务器节点按散列因子拉取压缩文件进行递归解压,最后根据关键字或记录分隔符提取出压缩文件中的关键信息。 | ||
搜索关键词: | 一种 快速 大批量 压缩文件 提取 日志 方法 | ||
【主权项】:
1.一种快速从大批量压缩文件中提取日志的方法,其特征在于,该方法包括如下步骤:步骤1:根据各个压缩文件名和节点数计算出每个压缩文件的散列因子;步骤2:计算各个节点资源情况开启多进程,每个节点多进程开启前先计算CPU使用情况;步骤3:在多进程工作模式下递归解压,并将遇到的压缩文件一并解压;步骤4:多进程模式下,利用文件处理利器提取解压后的文件夹中各个文件的关键信息,用关键字作为文本的字段或者记录分隔符提取出关键信息。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于四川长虹电器股份有限公司,未经四川长虹电器股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201910204047.2/,转载请声明来源钻瓜专利网。