[发明专利]数据血缘分析方法、装置、电子设备及存储介质

权利要求书

1.一种数据血缘分析方法，其特征在于，包括：

获取待分析大宽表和所述待分析大宽表的生成日志，其中，所述待分析大宽表包括多个目标字段；

通过预设语法生成器对所述待分析大宽表的生成日志进行语法分析，获取所述待分析大宽表对应的日志分析数据；

根据所述待分析大宽表中的目标字段和所述日志分析数据，获取所述待分析大宽表的血缘分析数据，所述血缘分析数据包括所述目标字段的上游表和上游字段。

2.根据权利要求1所述的方法，其特征在于，所述待分析大宽表的生成日志为HIVE日志，所述预设语法生成器为ANTLR语法分析器；

所述通过预设语法生成器对所述待分析大宽表的生成日志进行语法分析，获取所述待分析大宽表对应的日志分析数据，包括：

通过所述ANTLR语法分析器对所述待分析大宽表的HIVE日志进行语法分析，获取所述待分析大宽表对应的日志分析语法树，所述日志分析语法树包括多棵字段语法分析树。

3.根据权利要求2所述的方法，其特征在于，所述通过所述ANTLR语法分析器对所述待分析大宽表的HIVE日志进行语法分析，获取所述待分析大宽表对应的日志分析语法树，包括：

通过所述ANTLR语法分析器解析所述HIVE日志中的每条日志语句，获取解析结果；

根据所述解析结果，获取所述待分析大宽表对应的日志分析语法树。

4.根据权利要求3所述的方法，其特征在于，所述根据所述解析结果，获取所述待分析大宽表对应的日志分析语法树，包括：

根据所述解析结果，获取每条所述日志语句中的字段以及所述字段的上游表和上游字段；

根据每条所述日志语句中的字段以及所述字段的上游表和上游字段，构建所述待分析大宽表对应的日志分析语法树。

5.根据权利要求2所述的方法，其特征在于，所述根据所述待分析大宽表中的目标字段和所述日志分析数据，获取所述待分析大宽表的血缘分析数据，包括：

根据所述日志分析语法树，获取每个所述字段语法分析树对应的节点集合，所述节点集合包括：所述字段语法分析树的所有节点名称；

根据所述待分析大宽表中的目标字段，遍历每个所述字段语法分析树，根据所述字段语法分析树对应的节点集合，获取所述待分析大宽表中所述目标字段的上游表和上游字段。

6.根据权利要求5所述的方法，其特征在于，所述获取所述待分析大宽表的血缘分析数据之后，还包括：

将所述待分析大宽表中所述目标字段的上游表和上游字段记录到预设数据库中。

7.根据权利要求1-6任一项所述的方法，其特征在于，所述上游表包括：表名；所述上游字段包括：所属上游表的表名、在所述上游表中的字段名。

8.根据权利要求1-6任一项所述的方法，其特征在于，所述大宽表为服务请求方大宽表，所述服务请求方大宽表包括多个服务请求方字段。

9.一种数据血缘分析装置，其特征在于，包括：第一获取模块、分析模块及第二获取模块；

所述第一获取模块，用于获取待分析大宽表和所述待分析大宽表的生成日志，其中，所述待分析大宽表包括多个目标字段；

所述分析模块，用于通过预设语法生成器对所述待分析大宽表的生成日志进行语法分析，获取所述待分析大宽表对应的日志分析数据；

所述第二获取模块，用于根据所述待分析大宽表中的目标字段和所述日志分析数据，获取所述待分析大宽表的血缘分析数据，所述血缘分析数据包括所述目标字段的上游表和上游字段。

10.一种电子设备，其特征在于，包括：处理器、存储介质和总线，所述存储介质存储有所述处理器可执行的机器可读指令，当电子设备运行时，所述处理器与所述存储介质之间通过总线通信，所述处理器执行所述机器可读指令，以执行如权利要求1-8任一项所述数据血缘分析方法的步骤。

11.一种存储介质，其特征在于，所述存储介质上存储有计算机程序，所述计算机程序被处理器运行时执行如权利要求1-8任一项所述数据血缘分析方法的步骤。