[发明专利]数据仓库的数据处理方法、装置、系统及存储介质

权利要求书

1.一种数据仓库的数据处理方法，其特征在于，包括：

获取线上数据库的数据模型对应的操作日志；

对所述操作日志进行解析，得到数据修改表；

根据所述数据修改表，对数据仓库的数据模型进行修改，得到目标数据模型；

根据所述目标数据模型，对线上数据库的数据进行存储操作。

2.根据权利要求1所述的方法，其特征在于，所述获取线上数据库的数据模型对应的操作日志，包括：

当线上数据库的数据模型被修改时，获取所述线上数据库的数据模型对应的操作日志。

3.根据权利要求1所述的方法，其特征在于，所述对所述操作日志进行解析，得到数据修改表，包括：

从所述操作日志中查找出所有执行语句；

根据所述执行语句，解析出针对所述线上数据库的数据模型的修改内容；

根据所述修改内容，确定数据修改表；其中，所述数据修改表中记录有针对线上数据库的数据模型的修改信息，所述修改信息包括：添加的字段信息、修改的字段类型、修改的主键名称。

4.根据权利要求1-3中任一项所述的方法，其特征在于，在根据所述数据修改表，对数据仓库的数据模型进行修改之前，还包括：

对所述数据修改表进行校验。

5.根据权利要求4所述的方法，其特征在于，对所述数据修改表进行校验，包括：

根据预设的校验要求，对所述数据修改表中的修改信息进行依次校验；其中，所述预设的校验要求包括以下任一或者任多：符合业务需求对应的修改规范、属于允许变更的数据类型、在允许修改的权限范围内；

若所有修改信息均满足所述预设的校验要求，则校验通过。

6.根据权利要求4所述的方法，其特征在于，还包括：

若校验不通过，则拒绝对数据仓库的数据模型进行修改，并反馈修改失败提示信息。

7.根据权利要求1-3中任一项所述的方法，其特征在于，根据所述目标数据模型，对线上数据库的数据进行存储操作，包括：

通过抽取工具从线上数据库中抽取数据；

根据所述目标数据模型，对抽取到的数据进行清洗处理，得到各个业务线所需的目标数据；

将所述目标数据进行存储。

8.一种数据仓库的数据处理装置，其特征在于，包括：

获取模块，用于获取线上数据库的数据模型对应的操作日志；

解析模块，用于对所述操作日志进行解析，得到数据修改表；

变更模块，用于根据所述数据修改表，对数据仓库的数据模型进行修改，得到目标数据模型；

存储模块，用于根据所述目标数据模型，对线上数据库的数据进行存储操作。

9.一种数据仓库的数据处理系统，其特征在于，包括：存储器、处理器，存储器中存储有所述处理器的可执行指令；其中，所述处理器配置为经由执行所述可执行指令来执行权利要求1-7所述的数据仓库的数据处理方法。

10.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，该程序被处理器执行时实现权利要求1-7所述的数据仓库的数据处理方法。