[发明专利]数据自清洗方法、装置、电子设备及存储介质

权利要求书

1.一种数据自清洗方法，其特征在于，所述方法包括：

确定待处理的目标数据表和目标数据，所述目标数据为所述目标数据表对应的非结构化数据、且其中包含至少一条数据；

获取所述目标数据表对应的字段信息，所述字段信息能够表征所述目标数据表中的第一字段、以及所述第一字段间的字段次序；

针对所述目标数据中的每条数据，对该条数据执行解析操作，以确定该条数据中的第二字段、以及所述第二字段对应的字段值；按照所述字段次序对所述第一字段和所述第二字段执行映射操作，以确定该条数据于所述第一字段所对应的字段值。

2.根据权利要求1所述的方法，其特征在于，所述获取所述目标数据表对应的字段信息，包括：

获取所述目标数据表对应的元数据信息表，所述元数据信息表中至少包含有序的字段元数据信息；

依次读取所述有序的字段元数据信息，以确定当前读取到的字段元数据信息所匹配的字段；

将所确定的字段依次写入至已确定的有序字段列表中，所述有序字段列表用于存储字段、且其中字段的次序与所述元数据信息表中字段元数据信息的次序相同。

3.根据权利要求2所述的方法，其特征在于，所述方法还包括：

输出所述有序字段列表。

4.根据权利要求1所述的方法，其特征在于，所述对该条数据执行解析操作，包括：

提取该条数据中的键值对，所述键值对中的键表征字段、所述键值对中的值表征字段值；

建立所述键值对中字段与字段值间的对应关系。

5.根据权利要求1所述的方法，其特征在于，所述按照所述字段次序对所述第一字段和所述第二字段执行映射操作，包括：

按照所述字段次序在所述第二字段中确定与所述第一字段相匹配的目标字段；

确定所述目标字段所对应的字段值，并将所确定的字段值依次写入至已确定的有序数据列表中，所述有序数据列表用于存储字段值、且其中字段值的次序与所述字段次序相同。

6.根据权利要求5所述的方法，其特征在于，所述方法还包括：

输出所述有序数据列表。

7.一种数据自清洗装置，其特征在于，所述装置包括：

确定模块，用于确定待处理的目标数据表和目标数据，所述目标数据为所述目标数据表对应的非结构化数据、且其中包含至少一条数据；

获取模块，用于获取所述目标数据表对应的字段信息，所述字段信息能够表征所述目标数据表中的第一字段、以及所述第一字段间的字段次序；

清洗模块，用于针对所述目标数据中的每条数据，对该条数据执行解析操作，以确定该条数据中的第二字段、以及所述第二字段对应的字段值；按照所述字段次序对所述第一字段和所述第二字段执行映射操作，以确定该条数据于所述第一字段所对应的字段值。

8.根据权利要求7所述的装置，其特征在于，所述获取模块，具体用于：

获取所述目标数据表对应的元数据信息表，所述元数据信息表中至少包含有序的字段元数据信息；依次读取所述有序的字段元数据信息，以确定当前读取到的字段元数据信息所匹配的字段；将所确定的字段依次写入至已确定的有序字段列表中，所述有序字段列表用于存储字段、且其中字段的次序与所述元数据信息表中字段元数据信息的次序相同。

9.一种电子设备，其特征在于，所述电子设备包括：至少一个存储器和至少一个处理器；所述存储器存储有程序，所述处理器调用所述存储器存储的程序，所述程序用于实现权利要求1-6任意一项所述的一种数据自清洗方法。

10.一种存储介质，其特征在于，所述存储介质中存储有计算机可执行指令，所述计算机可执行指令用于执行权利要求1-6任意一项所述的一种数据自清洗方法。