[发明专利]基于规则库扩充的数据治理方法及装置

说明书

本发明提供了一种基于规则库扩充的数据治理方法及装置，该方法包括：基于通用规则库对目标表进行数据处理；如果所述通用规则库中的规则不满足数据处理需求，添加自定义规则以扩充所述通用规则库；基于扩充后的所述通用规则库对所述目标表进行数据处理。在本发明中，先是基于通用规则库进行数据处理，若是通用规则库不满足业务场景需求，则采用自定义的规则扩充规则库，从而解决了通用规则库不满足新数据类型和应用场景需求的问题，既满足了基本的数据处理的需求的同时，也对复杂的业务场景有较好的支持。

技术领域

本发明涉及数据治理领域，具体而言，涉及一种基于规则库扩充的数据治理方法及装置。

背景技术

在当今各行各业，数据已经成为了一种十分宝贵的资源，于是数据的质量管理的重要性不言而喻，如数据的有效性，准确性，一致性等，而如何保护及处理这些数据，对这些数据的质量问题进行监控，目前常见的方式是构建规则库。

目前，在构建规则库的方面一般为提前设置好一些常见的通用型规则，在处理现有数据的时候再使用这些规则，这种方式对于现有的使用场景可以适应，但其不具有较好的适用性，对于出现新的数据类型和应用场景，现有的规则库极可能满足不了所有的场景需求。

发明内容

本发明实施例提供了一种基于规则库扩充的数据治理方法及装置，以至少解决相关技术中由于出现新的数据类型和应用场景，现有的规则库极可能满足不了所有的场景需求的问题。

根据本发明的一个实施例，提供了一种基于规则库扩充的数据治理方法，包括：基于通用规则库对目标表进行数据处理；如果所述通用规则库中的规则不满足数据处理需求，添加自定义规则以扩充所述通用规则库；基于扩充后的所述通用规则库对所述目标表进行数据处理。

优选地，在基于通用规则库对目标表进行数据处理之前，还包括：根据通用规则构建所述通用规则库。

优选地，如果所述通用规则库中的规则不满足数据处理需求，添加自定义规则以扩充所述通用规则库之前，还包括：判断所述通用规则库中的规则是否满足所述目标表的数据处理需求。

优选地，所述目标表包括新的数据类型。

根据本发明的另一个实施例，提供了一种基于规则库扩充的数据治理装置，包括：基于通用规则库对目标表进行数据处理；如果所述通用规则库中的规则不满足数据处理需求，添加自定义规则以扩充所述通用规则库；基于扩充后的所述通用规则库对所述目标表进行数据处理。

优选地，所述装置还包括构建模块，用于根据通用规则构建所述通用规则库。

优选地，所述装置还包括判断模块，用于判断所述通用规则库中的规则是否满足所述目标表的数据处理需求。

优选地，所述目标表包括新的数据类型。

根据本发明的又一个实施例，还提供了一种存储介质，所述存储介质中存储有计算机程序，其中，所述计算机程序被设置为运行时执行上述任一项方法实施例中的步骤。

根据本发明的又一个实施例，还提供了一种电子装置，包括存储器和处理器，所述存储器中存储有计算机程序，所述处理器被设置为运行所述计算机程序以执行上述任一项方法实施例中的步骤。

在本发明的上述实施例中，先是基于通用规则库进行数据处理，若是通用规则库不满足业务场景需求，则采用自定义的规则扩充规则库，从而解决了通用规则库不满足新数据类型和应用场景需求的问题，既满足了基本的数据处理的需求的同时，也对复杂的业务场景有较好的支持。

附图说明

此处所说明的附图用来提供对本发明的进一步理解，构成本申请的一部分，本发明的示意性实施例及其说明用于解释本发明，并不构成对本发明的不当限定。在附图中：

图1是根据本发明实施例的方法运行的计算机终端的结构示意图；