[发明专利]数据追溯方法、装置、数据处理设备及计算机存储介质

权利要求书

1.一种数据追溯方法，其特征在于，包括：

获取待追溯的目标数据处理流程，所述目标数据处理流程由目标输入数据集、目标输出数据集、以及数据转换节点集构成，所述数据转换节点集用于将输入所述目标输入数据集中的数据进行处理后输出到所述目标输出数据集中，所述数据转换节点集中包含至少一个数据转换算法节点或一个以上级联的数据转换算法节点，所述数据转换算法节点包含被转换数据转换前后的各字段映射关系；

获取各所述数据转换算法节点输入及输出数据的字段列表的字段内容，并根据各所述数据转换算法节点的被转换数据转换前后的各字段映射关系，得到输入及输出字段列表中各字段内容的映射关系；

根据各所述数据转换算法节点输入及输出字段列表中各字段内容的映射关系，生成所述目标数据处理流程的数据迁移关系图；

根据数据追溯指令调用所述数据迁移关系图进行数据追溯，其中，

在所述获取待追溯的目标数据处理流程之前，所述数据追溯方法还包括：根据预设数据处理流程对所述目标输入数据集进行处理，并在数据处理过程中保存各所述数据转换算法节点输出数据的字段列表的字段内容，以及各所述数据转换算法节点中各输入字段列表与各输出字段列表的映射关系；并将所述预设数据处理流程作为所述目标数据处理流程。

2.如权利要求1所述的数据追溯方法，其特征在于，所述获取各所述数据转换算法节点的输入及输出数据的字段列表，并根据各所述数据转换算法节点的被转换数据转换前后的各字段映射关系，得到输入及输出字段列表中各字段内容的映射关系包括：

获取所述目标输入数据集的字段列表，并获取在所述数据处理过程中保存的各所述数据转换算法节点输出数据的字段列表以及各所述数据转换算法节点中各输入字段列表与各输出字段列表的映射关系；

根据所述目标输入数据集各数据的字段列表的字段内容、各所述数据转换算法节点输出数据的字段列表的字段内容、以及各所述数据转换算法节点中各输入字段列表与各输出字段列表的映射关系，得到各所述数据转换算法节点输入及输出字段列表中各字段内容的映射关系。

3.如权利要求1或2所述的数据追溯方法，其特征在于，各所述数据转换算法节点为包含字段映射关系的单一功能算法节点。

4.如权利要求3所述的数据追溯方法，其特征在于，所述字段列表中包括：表征所述字段列表所在数据集信息的字段，和/或表征所述字段列表所在数据集所属的数据仓库信息的字段。

5.如权利要求1所述的数据追溯方法，其特征在于，所述根据数据追溯指令调用所述数据迁移关系图进行数据追溯包括：

根据所述数据追溯指令调用所述数据迁移关系图在所述数据追溯指令要求的数据层面上展示数据迁移关系；

根据展示的所述数据迁移关系在展现的所述数据层面上追溯数据来源。

6.一种数据追溯装置，其特征在于，包括：

数据迁移关系图生成模块，用于获取待追溯的目标数据处理流程，所述目标数据处理流程由目标输入数据集、目标输出数据集、以及数据转换节点集构成，所述数据转换节点集用于将输入所述目标输入数据集中的数据进行处理后输出到所述目标输出数据集中，所述数据转换节点集中包含至少一个数据转换算法节点或一个以上级联的数据转换算法节点，所述数据转换算法节点包含被转换数据转换前后的各字段映射关系；并用于获取各所述数据转换算法节点输入及输出数据的字段列表的字段内容，并根据各所述数据转换算法节点的被转换数据转换前后的各字段映射关系，得到输入及输出字段列表中各字段内容的映射关系；以及用于根据各所述数据转换算法节点输入及输出字段列表中各字段内容的映射关系，生成所述目标数据处理流程的数据迁移关系图；

数据追溯模块，用于根据数据追溯指令调用所述数据迁移关系图对进行数据追溯，其中，

所述数据迁移关系图生成模块还用于在所述获取待追溯的目标数据处理流程之前，根据预设数据处理流程对所述目标输入数据集进行处理，并在数据处理过程中保存各所述数据转换算法节点输出数据的字段列表的字段内容，以及各所述数据转换算法节点中各输入字段列表与各输出字段列表的映射关系；并将所述预设数据处理流程作为所述目标数据处理流程。