[发明专利]一种数据治理管理系统

权利要求书

1.一种数据治理管理系统，其特征在于，包括：

数据治理创建模块，用于创建数据流，包括：设置输入控件、一个或多个转换操作控件、输出控件，在所述输入控件、一个或多个转换操作控件、输出控件之间建立顺序连接，其中，每个所述转换操作控件对应一个数据转换功能，并对所述输入控件赋值输入数据，运行所述数据治理创建模块，在数据治理过程中，数据被自动提取和加载，并根据所述转换操作控件进行处理，转换为相应的格式或结构供查询和分析，由所述输出控件得到的输出数据为数据流，并将其加载到数据中心中；

数据治理编辑模块，用于对所述数据中心中保存的数据流的信息进行编辑保存；

数据治理删除模块，用于对所述数据中心中保存的数据流的信息进行删除处理；

数据治理管理模块，用于对所述数据中心中保存的数据流提供数据运行功能，并提供数据流运行历史查询记录。

2.如权利要求1所述的数据治理管理系统，其特征在于，所述数据治理编辑模块还用于提供禁用或删除数据流功能，其中，执行禁用数据流，将会停止数据流自动更新设置的运行；执行删除数据流，该数据流将会从数据治理系统移除，但由其输出的数据仍然保留。

3.如权利要求1所述的数据治理管理系统，其特征在于，每个所述数据流的信息包括：名称、连接器、所有者、行列数、图集数及最后更新时间。

4.如权利要求1所述的数据治理管理系统，其特征在于，所述数据治理创建模块对输入控件进行赋值，赋值数据从预存的带有JDBC驱动的数据库或第三方云应用中获取。

5.如权利要求1所述的数据治理管理系统，其特征在于，所述一个或多个转换操作控件包括：常量列、计算、列转行、连接列、日期计算、分组聚合、排序和累计、选择列、修改列类型、行转列、文本计算、过滤、删除重复项、替换文本、设置列值、文本格式化、值映射、合并、关联。

6.如权利要求5所述的数据治理管理系统，其特征在于，所述数据治理管理模块对数据运行排序和累计功能，包括：对数据进行排序、累计与偏移操作，并对结果进行排序与分组展示。

7.如权利要求5所述的数据治理管理系统，其特征在于，所述数据治理管理模块对数据运行值映射功能，包括：根据特定列中的值进行内容的匹配映射，对已有列进行值替换或创建新的列。

8.如权利要求5所述的数据治理管理系统，其特征在于，所述数据治理管理模块对数据运行合并功能，包括：将来自多个数据集的具有相同数据结构和数据类型的行合并到一个数据集中，返回所有匹配项，包括重复行；如果数据结构不匹配，则创建新的列。

9.如权利要求5所述的数据治理管理系统，其特征在于，所述数据治理管理模块对数据运行关联功能，包括：用特定列或列集的公共值，将两个数据集组合成一个数据集，其中，特定列必须存在于两个输入数据中，且具有相同的数据结构。

10.如权利要求1所述的数据治理管理系统，其特征在于，所述多个转换操作控件的数据连接和数据抽取过程，采用SQL语句执行。