[发明专利]任务运行日志的处理方法、装置、设备及存储介质在审
申请号: | 202010340464.2 | 申请日: | 2020-04-26 |
公开(公告)号: | CN111611127A | 公开(公告)日: | 2020-09-01 |
发明(设计)人: | 王昱森;林静露;王勃;罗伟锋 | 申请(专利权)人: | 第四范式(北京)技术有限公司 |
主分类号: | G06F11/30 | 分类号: | G06F11/30;G06F16/18;G06F16/33;G06F16/35 |
代理公司: | 北京博雅睿泉专利代理事务所(特殊普通合伙) 11442 | 代理人: | 马铁良 |
地址: | 100085 北京市海淀区上*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 任务 运行 日志 处理 方法 装置 设备 存储 介质 | ||
1.一种任务运行日志的处理方法,其特征在于,所述方法包括:
获取并保存预置的报错原因关键词和对应的报错规则;
当任务运行失败时,根据所保存的报错规则去匹配任务运行日志;
将匹配成功的报错规则所对应的报错原因关键词展示到前端。
2.根据权利要求1所述的方法,其中,所述报错原因关键词和对应的报错规则包括如下中的至少一种:
内存不足,对应单个关键字报错;
license超限,对应同时满足多个关键字且不在同一行报错;
算法参数配置错误,对应同时满足多个关键字且不在同一行报错;
脚本语法错误,对应同时满足多个关键字且不在同一行报错;
集群时区不同步,对应同时满足多个关键字且不在同一行报错;
权限不足,对应单个关键字报错。
3.根据权利要求1所述的方法,其中,所述方法还包括:根据所述任务中的执行步骤的先后顺序,对所述任务的运行日志进行分类收集,从而得到多个子日志文件;
所述根据所保存的报错规则去匹配任务运行日志包括:根据所述多个子日志文件的产生顺序的倒序去进行匹配。
4.根据权利要求3所述的方法,其中,
所述多个子日志文件包括:引擎日志、非业务日志和业务日志。
5.根据权利要求4所述的方法,其中,
所述引擎日志用于记录调度执行引擎时的系统相关信息;
所述非业务日志用于记录任务运行时的系统相关信息;以及,
所述业务日志用于记录任务运行时的算法相关信息。
6.根据权利要求4所述的方法,其中,所述引擎日志在所述任务运行之前的第一阶段生成,所述非业务日志在所述任务运行的第二阶段生成,所述业务日志在所述任务运行的第三阶段生成,所述第二阶段、所述第三阶段依时间顺序先后执行。
7.根据权利要求4所述的方法,其中,所述多个子日志文件包括引擎日志和非业务日志,
所述根据所述多个子日志文件的产生顺序的倒序去进行匹配,包括:
从最后一条所述非业务日志开始从后向前依次匹配。
8.一种任务运行日志的处理装置,包括:
获取模块,用于获取并保存预置的报错原因关键词和对应的报错规则;
匹配模块,用于当任务运行失败时,根据所保存的报错规则去匹配任务运行日志;
展示模块,用于将匹配成功的报错规则所对应的报错原因关键词展示到前端。
9.一种包括至少一个计算装置和至少一个存储装置的设备,其中,所述至少一个存储装置用于存储指令,所述指令用于控制所述至少一个计算装置执行根据权利要求1-7中任一项所述的方法。
10.一种计算机可读存储介质,其中,其上存储有计算机程序,所述计算机程序在被处理器执行时实现如权利要求1-7中任一项所述的方法。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于第四范式(北京)技术有限公司,未经第四范式(北京)技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010340464.2/1.html,转载请声明来源钻瓜专利网。