[发明专利]数据清洗方法、装置、存储介质及电子设备

权利要求书

1.一种数据清洗方法，其特征在于，包括：

响应目标对象对多个操作节点的操作命令，生成第一流程图，其中，每个操作节点用于执行所述第一流程图对应的目标数据清洗任务的至少一项操作，所述第一流程图表征所述多个操作节点的执行顺序；

根据所述第一流程图，确定所述目标数据清洗任务的清洗规则，其中，所述清洗规则至少包括所述多个操作节点的运行规则；

基于所述清洗规则，对所述目标数据清洗任务对应的源数据集进行数据清洗处理，得到目标清洗结果，其中，所述目标清洗结果表征所述数据清洗处理是否成功。

2.根据权利要求1所述的方法，其特征在于，基于所述清洗规则，对所述目标数据清洗任务对应的源数据集进行数据清洗处理，得到目标清洗结果，包括：

确定所述每个操作节点的节点状态，其中，所述节点状态为以下之一：未修改状态、已修改状态；

从所述每个操作节点的运行规则中，获取多个目标操作节点的运行规则，生成第一清洗规则，其中，所述多个目标操作节点的节点状态为所述已修改状态；

基于所述第一清洗规则，对所述目标数据清洗任务对应的源数据集进行所述数据清洗处理，得到所述目标清洗结果。

3.根据权利要求2所述的方法，其特征在于，基于所述第一清洗规则，对所述目标数据清洗任务对应的源数据集进行所述数据清洗处理，得到所述目标清洗结果，包括：

基于所述第一清洗规则，从每个目标操作节点对应的执行命令中确定第一执行命令和第二执行命令，其中，所述第一执行命令的执行顺序优先于所述第二执行命令的执行顺序；

执行所述第一执行命令，对所述目标数据清洗任务对应的源数据集进行所述数据清洗处理，生成第一数据集；

执行所述第二执行命令，对所述第一数据集进行所述数据清洗处理，生成第二数据集，其中，所述第二数据集的数据标准程度高于所述第一数据集的数据标准程度；

基于所述第二数据集，生成所述目标清洗结果。

4.根据权利要求3所述的方法，其特征在于，基于所述第二数据集，生成所述目标清洗结果，包括：

确定第一操作节点的执行状态，其中，所述执行状态为以下之一：正在执行状态、未执行状态；

在所述执行状态为所述未执行状态的情况下，将所述执行状态更新为所述正在执行状态，并获取所述第一操作节点的运行规则，其中，所述第一操作节点的运行规则至少包括所述第二数据集的输出模式，所述输出模式为以下之一：第一输出模式、第二输出模式，所述第二输出模式对应的数据量小于所述第一输出模式对应的数据量；

在所述第二数据集的输出模式为所述第一输出模式的情况下，判断所述第二数据集的数据结构是否发生变化；

在所述第二数据集的数据结构发生变化的情况下，更新所述第二数据集的数据结构；

在更新所述第二数据集的数据结构之后，或者，在所述第二数据集的数据结构未发生变化的情况下，创建第一数据表，并从当前数据表中将所述第二数据集的数据写入所述第一数据表，生成写入结果，其中，所述写入结果表征是否成功从所述当前数据表中将所述第二数据集的数据写入所述第一数据表；

依据所述写入结果，生成所述目标清洗结果。

5.根据权利要求4所述的方法，其特征在于，依据所述写入结果，生成所述目标清洗结果，包括：

在所述写入结果表征成功从所述当前数据表中将所述第二数据集的数据写入所述第一数据表的情况下，对所述当前数据表的名称和所述第一数据表的名称进行互换，并删除名称为所述第一数据表的名称的所述当前数据表；

根据名称为所述当前数据表的名称的所述第一数据表，得到目标数据集，并生成数据清洗成功结果；

在所述写入结果表征未成功从所述当前数据表中将所述第二数据集的数据写入所述第一数据表的情况下，删除所述第一数据表，并生成数据清洗失败结果。