[发明专利]一种离线数据处理任务发布方法及系统

权利要求书

1.一种离线数据处理任务发布方法，其特征在于，包括：

根据用户的离线数据处理任务更新操作，从代码评审中心Gerrit中获取各个离线数据处理任务的最新代码；

编辑所述最新代码，对所述各个离线数据处理任务进行配置并将配置后的各个离线数据处理任务的状态设置为待发布状态；

利用调度引擎，将待发布状态的离线数据处理任务发送至任务调度中心进行发布。

2.根据权利要求1所述的离线数据处理任务发布方法，其特征在于，利用调度引擎，将待发布状态的离线数据处理任务发布至任务调度中心包括：

解析所述待发布状态的离线数据处理任务对应的SQL语句；

根据所述SQL语句，确定所述离线数据处理任务关联的源数据表及目标数据表；

根据所述源数据表及所述目标数据表，确定与所述离线数据处理任务具有依赖关系的离线数据处理任务。

3.根据权利要求1所述的离线数据处理任务发布方法，其特征在于，利用调度引擎，将待发布状态的离线数据处理任务发布至任务调度中心包括：

根据执行参数中的源数据表参数及目标数据表参数，确定脚本类的离线数据处理任务关联的源数据表和目标数据表；

根据所述源数据表和所述目标数据表，确定与所述离线数据处理任务具有依赖关系的离线数据处理任务。

4.根据权利要求2或3所述的离线数据处理任务发布方法，其特征在于，根据所述源数据表和所述目标数据表，确定与所述离线数据处理任务具有依赖关系的离线数据处理任务包括：

根据所述源数据表和所述目标数据表，确定所述离线数据处理任务的类型及所述离线数据处理任务与其他离线数据处理任务之间的血缘关系；

根据所述离线数据处理任务的类型及所述离线数据处理任务与其他离线数据处理任务之间的血缘关系，确定与所述离线数据处理任务具有依赖关系的离线数据处理任务。

5.根据权利要求1所述的离线数据处理任务发布方法，其特征在于，编辑所述最新代码，对所述各个离线数据处理任务进行配置包括：

为需要强制执行的离线数据处理任务设置标识。

6.一种离线数据处理任务发布系统，其特征在于，包括：

获取模块，用于根据用户的离线数据处理任务更新操作，从代码审查工具Gerrit中获取各个离线数据处理任务的最新代码；

配置模块，用于编辑所述最新代码，对所述各个离线数据处理任务进行配置并将配置后的各个离线数据处理任务的状态设置为待发布状态；

发布模块，用于利用调度引擎，将待发布状态的离线数据处理任务发布至任务调度中心。

7.一种计算机程序产品，其特征在于，所述计算机程序产品包括存储在非暂态计算机可读存储介质上的计算机程序，所述计算机程序包括程序指令，当所述程序指令被计算机执行时，使所述计算机执行如权利要求1-5任一项所述的方法。

8.一种非暂态计算机可读存储介质，其特征在于，所述非暂态计算机可读存储介质存储计算机指令，所述计算机指令使所述计算机执行如权利要求1-5任一项所述的方法。