[发明专利]ETL任务的处理方法、装置、设备及存储介质有效
申请号: | 201910872609.0 | 申请日: | 2019-09-16 |
公开(公告)号: | CN110580265B | 公开(公告)日: | 2020-11-20 |
发明(设计)人: | 朱林林 | 申请(专利权)人: | 北京三快在线科技有限公司 |
主分类号: | G06F16/25 | 分类号: | G06F16/25 |
代理公司: | 北京三高永信知识产权代理有限责任公司 11138 | 代理人: | 谢冬寒 |
地址: | 100080 北京市海*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | etl 任务 处理 方法 装置 设备 存储 介质 | ||
本申请公开了一种ETL任务的处理方法、装置、设备及存储介质。所述方法包括:获取ETL任务的元数据信息;根据元数据信息确定ETL任务的评价参数,该评价参数用于表征ETL任务的价值;根据评价参数对ETL任务进行处理。本申请实施例提供的技术方案中,通过获取ETL任务的元数据信息,根据该元数据信息确定该ETL任务的评价参数,然后基于该评价参数对ETL任务进行处理;从而通过对ETL任务进行量化评估,实现了对ETL任务的价值的量化表征,进而实现了对ETL任务的自动化管理,相比于人工管理的方式,效率更高,且成本更低。
技术领域
本申请实施例涉及计算机和互联网技术领域,特别涉及一种ETL任务的处理方法、装置、设备及存储介质。
背景技术
ETL(Extract-Transform-Load,抽取-转换-加载)任务是一种用于实现对数据进行处理的任务,常用在数据库系统和数据仓库中。
在相关技术中,对于已经发布上线的ETL任务,需要人工对其进行核查,以决策是否需要下线该ETL任务。
发明内容
本申请实施例提供了一种ETL任务的处理方法、装置、设备及存储介质。所述技术方案如下:
一方面,本申请实施例提供一种ETL任务的处理方法,所述方法包括:
获取ETL任务的元数据信息;
根据所述元数据信息,确定所述ETL任务的评价参数;其中,所述评价参数用于表征所述ETL任务的价值;
根据所述评价参数对所述ETL任务进行处理。
另一方面,本申请实施例提供一种ETL任务的处理装置,所述装置包括:
信息获取模块,用于获取ETL任务的元数据信息;
参数确定模块,用于根据所述元数据信息,确定所述ETL任务的评价参数;其中,所述评价参数用于表征所述ETL任务的价值;
任务处理模块,用于根据所述评价参数对所述ETL任务进行处理。
再一方面,本申请实施例提供一种计算机设备,所述计算机设备包括处理器和存储器,所述存储器中存储有计算机程序,所述计算机程序由所述处理器加载并执行以实现上述ETL任务的处理方法。
又一方面,本申请实施例提供一种非临时性计算机可读存储介质,其上存储有计算机程序,所述计算机程序被处理器执行时实现上述ETL任务的处理方法。
本申请实施例提供的技术方案可以带来如下有益效果:
通过获取ETL任务的元数据信息,根据该元数据信息确定该ETL任务的评价参数,然后基于该评价参数对ETL任务进行处理;从而通过对ETL任务进行量化评估,实现了对ETL任务的价值的量化表征,进而实现了对ETL任务的自动化管理,相比于人工管理的方式,效率更高,且成本更低。
附图说明
为了更清楚地说明本申请实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本申请一个实施例提供的ETL任务的处理方法的流程图;
图2是本申请另一个实施例提供的ETL任务的处理方法的流程图;
图3是本申请一个实施例提供的ETL任务的评价参数的示意图;
图4是本申请一个实施例提供的ETL任务的处理装置的框图;
图5是本申请另一个实施例提供的ETL任务的处理装置的框图;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京三快在线科技有限公司,未经北京三快在线科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910872609.0/2.html,转载请声明来源钻瓜专利网。