[发明专利]数据处理过程的监管方法、装置、计算机设备及存储介质在审
申请号: | 202010575552.0 | 申请日: | 2020-06-22 |
公开(公告)号: | CN111782679A | 公开(公告)日: | 2020-10-16 |
发明(设计)人: | 刘艺 | 申请(专利权)人: | 深圳市酷开网络科技有限公司 |
主分类号: | G06F16/242 | 分类号: | G06F16/242;G06F16/28;G06F16/23;H04L29/08 |
代理公司: | 北京品源专利代理有限公司 11332 | 代理人: | 潘登 |
地址: | 518057 广东省深圳市南山区粤海街道高*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 数据处理 过程 监管 方法 装置 计算机 设备 存储 介质 | ||
1.一种数据处理过程的监管方法,其特征在于,包括:
检测在预设的时间节点结果表中是否有第一任务的更新数据;若否,则将所述第一任务标记为失败任务;
根据任务依赖关系确定所述失败任务在数据上游中对应的顶端任务;
调度所述顶端任务进行重试,并在所述顶端任务成功修复后,根据所述任务依赖关系继续调度所述顶端任务在数据下游中对应的第二任务,直至所述结果表中出现所述第一任务的更新数据,所述第二任务包括所述第一任务。
2.根据权利要求1所述的数据处理过程的监管方法,其特征在于,所述检测在预设的时间节点结果表中是否有第一任务的更新数据,包括:
获取每个所述结果表的最新更新时间;
根据所述最新更新时间确定是否有第一任务的更新数据。
3.根据权利要求1所述的数据处理过程的监管方法,其特征在于,在所述根据任务依赖关系确定所述失败任务在数据上游中对应的顶端任务之前,还包括:
获取所述失败任务的执行日志;
根据所述执行日志递归寻找所述失败任务在数据上游中的依赖任务;
根据递归结果确定所述任务依赖关系。
4.根据权利要求1所述的数据处理过程的监管方法,其特征在于,所述调度所述顶端任务进行重试,并在所述顶端任务成功修复后,根据所述任务依赖关系继续调度所述顶端任务在数据下游中对应的第二任务,直至所述结果表中出现所述第一任务的更新数据,包括:
获取所述失败任务对应的执行计划;
根据所述执行计划对所述顶端任务及所述第二任务进行调度。
5.根据权利要求4所述的数据处理过程的监管方法,其特征在于,所述调度所述顶端任务进行重试,并在所述顶端任务成功修复后,根据所述任务依赖关系继续调度所述顶端任务在数据下游中对应的第二任务,直至所述结果表中出现所述第一任务的更新数据,还包括:
确定所述顶端任务的重试时间;
根据所述重试时间对所述顶端任务及所述第二任务进行调度。
6.根据权利要求1所述的数据处理过程的监管方法,其特征在于,在所述检测在预设的时间节点结果表中是否有第一任务的更新数据之后,还包括:
若否,则发出指示任务失败的报警信息。
7.根据权利要求1所述的数据处理过程的监管方法,其特征在于,所述结果表存储于关系型数据库中。
8.一种数据处理过程的监管装置,其特征在于,包括:
更新检测模块,用于检测在预设的时间节点结果表中是否有第一任务的更新数据;若否,则将所述第一任务标记为失败任务;
任务确定模块,用于根据任务依赖关系确定所述失败任务在数据上游中对应的顶端任务;
任务重试模块,用于调度所述顶端任务进行重试,并在所述顶端任务成功修复后,根据所述任务依赖关系继续调度所述顶端任务在数据下游中对应的第二任务,直至所述结果表中出现所述第一任务的更新数据,所述第二任务包括所述第一任务。
9.一种计算机设备,其特征在于,包括:
一个或多个处理器;
存储器,用于存储一个或多个程序;
当所述一个或多个程序被所述一个或多个处理器执行,使得所述一个或多个处理器实现如权利要求1-7中任一所述的数据处理过程的监管方法。
10.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,该程序被处理器执行时实现如权利要求1-7中任一所述的数据处理过程的监管方法。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于深圳市酷开网络科技有限公司,未经深圳市酷开网络科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010575552.0/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种门型拉线塔腿部加固装置及加固方法
- 下一篇:一种坐站椅的锁定机构