[发明专利]数据仓库表结构变更方法及装置

说明书

本申请公开了一种数据仓库表结构变更方法及装置，该方法包括：将ODS层表结构与上游系统数据字典中定义的表结构相比较，确定表结构变更的数据表，作为第一数据表；根据第一数据表的表名称与预设的删表程序模板生成删表程序，利用删表程序删除第一数据表；根据第一数据表的表名称、字段属性与预设的建表程序模板生成建表程序，利用建表程序重建第一数据表，得到第二数据表；将与第二数据表对应的UDM层全量数据表中字段与第二数据表中字段比对，确定UDM层全量数据表中的变更字段；根据变更字段的字段属性与预设的字段变更程序模板生成变更程序，利用字段变更程序变更UDM层全量数据表中字段。本申请可以自动修改数据仓库中的表结构。

技术领域

本申请涉及数据仓库技术领域，尤其涉及一种数据仓库表结构变更方法及装置。

背景技术

本部分旨在为权利要求书中陈述的本发明实施例提供背景或上下文。此处的描述不因为包括在本部分中就承认是现有技术。

在接收到上游系统每日下发的数据文件之后，数据仓库系统将数据文件装载成操作数据存储(Operational Data Store，ODS)层数据表，再通过存储全量数据的过程加工成统一数据管理(Unified Data Manager，UDM)层数据表。如果上游系统的表结构发生变更，则数据仓库中ODS层以及UDM层的表结构都要随之进行变更。

目前，一般由维护人员比对当前数据仓库中ODS表结构与上游系统数据字典中定义的表结构，找到增删改的字段，之后再逐条手写ODS层表结构变更程序以及UDM层表的加工逻辑，利用ODS层表结构变更程序以及UDM层表的加工逻辑来修改数据仓库中的表结构。对于涉及数据表数量庞大的数据仓库来说，每次手动修改都需要花费维护人员大量的时间与精力，同时出错率高、修改效率低。

发明内容

本申请实施例提供一种数据仓库表结构变更方法，用以自动修改数据仓库中的表结构，节约人力，提高修改效率，降低出错率，该方法包括：

将ODS层表结构与上游系统数据字典中定义的表结构相比较，确定表结构发生变更的数据表，作为第一数据表；根据第一数据表的表名称与预设的删表程序模板生成删表程序，利用删表程序删除第一数据表；根据第一数据表的表名称、字段属性与预设的建表程序模板生成建表程序，利用建表程序重建第一数据表，得到第二数据表；将与第二数据表对应的UDM层全量数据表中字段与第二数据表中字段进行比对，确定UDM层全量数据表中的变更字段；根据变更字段的字段属性与预设的字段变更程序模板生成变更程序，利用变更程序变更UDM层全量数据表中字段。

本申请实施例还提供一种数据仓库表结构变更装置，用以自动修改数据仓库中的表结构，节约人力，提高修改效率，降低出错率，该装置包括：

比较模块，用于将ODS层表结构与上游系统数据字典中定义的表结构相比较，确定表结构发生变更的数据表，作为第一数据表；删表模块，用于根据比较模块确定的第一数据表的表名称与预设的删表程序模板生成删表程序，利用删表程序删除第一数据表；建表模块，用于根据比较模块确定的第一数据表的表名称、字段属性与预设的建表程序模板生成建表程序，利用建表程序重建第一数据表，得到第二数据表；比较模块，还用于将与建表模块建立的第二数据表对应的UDM层全量数据表中字段与第二数据表中字段进行比对，确定UDM层全量数据表中的变更字段；字段变更模块，用于根据比较模块确定的变更字段的字段属性与预设的字段变更程序模板生成变更程序，利用字段变更程序变更UDM层全量数据表中字段。

本申请实施例中，预设建表程序模板、删表程序模板和字段变成程序模板生成建表程序、删表程序和字段变更程序等自动化处理程序，由上述自动化处理程序删除、重建ODS层数据表以及变更UDM层全量数据表中的字段，完成上游系统表结构变更引起的数据仓库ODS层和UDM层的同步变更，变更过程自动进行，无需人为参与，节省了维护人员手动修改数据所需耗费的时间与精力，同时降低了编码的错误率，提高了修改效率。

附图说明