[发明专利]Azkaban项目的文件生成方法、装置及终端设备

说明书

本申请适用于大数据技术领域，提供了Azkaban项目的文件生成方法、装置及终端设备，包括：获取目标项目的数据库操作文件；获取每个所述数据库操作文件对应的查询数据表信息及存入数据表信息；根据所述查询数据表信息及所述存入数据表信息，确定每个所述数据库操作文件之间的依赖关系；根据所述依赖关系，生成每个所述数据库操作文件对应的Azkaban文件。本申请实施例能够自动生成Azkaban项目的文件。

技术领域

本申请属于大数据技术领域，尤其涉及一种Azkaban项目的文件生成方法、装置及终端设备。

背景技术

Azkaban是Linkedln开源的一个非常受欢迎的任务调度系统，将一个项目对应的脚本文件上传至Azkaban平台运行，便可实现对该项目的任务调度。

在现有技术中，通常需要手工为项目中的每个操作文件写出对应的任务脚本文件，这种方式操作繁琐且花费时间长，而且极可能忽略掉了其中某个文件的依赖配置，导致最终项目运行错误。

发明内容

有鉴于此，本申请实施例提供了Azkaban项目的文件生成方法、装置及终端设备，以解决现有技术中如何自动生成Azkaban项目的文件的问题。

本申请实施例的第一方面提供了一种Azkaban项目的文件生成方法，包括：

获取目标项目的数据库操作文件；

获取每个所述数据库操作文件对应的查询数据表信息及存入数据表信息；

根据所述查询数据表信息及所述存入数据表信息，确定每个所述数据库操作文件之间的依赖关系；

根据所述依赖关系，生成每个所述数据库操作文件对应的Azkaban文件。

可选地，所述获取每个所述数据库操作文件对应的查询数据表信息及存入数据表信息，包括：

根据每个所述数据库操作文件中的查表操作关键字，获取对应的查询数据表信息；

根据每个所述数据库操作文件中的建表操作关键字和插入操作关键字，获取对应的存入数据表信息。

可选地，第一数据库操作文件和第二数据库操作文件分别为不同的数据库操作文件，对应地，所述根据所述查询数据表信息及所述存入数据表信息，确定每个所述数据库操作文件之间的依赖关系，包括：

若所述第一数据库操作文件对应的查询数据表信息与所述第二数据库操作文件对应的存入数据表信息中存在相同的数据表信息，则确定所述第一数据库操作文件依赖于所述第二数据库操作文件。

可选地，在所述根据所述查询数据表信息及所述存入数据表信息，确定每个所述数据库操作文件之间的依赖关系之后，还包括：

根据所述存入数据表信息，确定每个所述数据库操作文件之间的依赖关系。

可选地，第三数据库操作文件和第四数据库操作文件分别为不同的数据库操作文件所述根据所述依赖关系，生成每个所述数据库操作文件对应的Azkaban文件，包括：

根据所述依赖关系，生成每个所述数据库操作文件对应的Azkaban文件；其中，若第三数据库操作文件依赖于第四数据库操作文件，则所述第三数据库操作文件对应的Azkaban文件包括添加的依赖配置信息，所述依赖配置信息包含所述第四数据库操作文件对应的Azkaban文件的文件名信息。

可选地，第三数据库操作文件和第四数据库操作文件分别为不同的数据库操作文件所述根据所述依赖关系，生成每个所述数据库操作文件对应的Azkaban文件，包括：