[发明专利]跨数据库数据提取方法、装置、电子设备及存储介质

说明书

本说明书一个或多个实施例提供的一种跨数据库数据提取方法、装置、电子设备及存储介质，针对跨物理库的数据集市的关联查询提数，采用数据库间会话级的关联查询实现自动归并数据、跨库联合查询，省去不同数据库的数据抽取、归并过程，提高开发效率，减少链路流程。

技术领域

本说明书一个或多个实施例涉及数据提取技术领域，尤其涉及一种跨数据库数据提取方法、装置、电子设备及存储介质。

背景技术

目前，数据提取都不能实现跨物理库进行数据抽取，常规方式是通过ETL数据抽取工具，将不同数据源的数据进行先期抽取、归并汇总到单一的数据库中，然后在单库中进行关联查询加工，将满足条件的数据进行导出。

ETL：Extract-Transform-Load，将数据从来源端经过抽取(extract)、转换(transform)、加载(load)至目的端的过程。

发明人发现，现有技术中，通过ETL数据提取工具进行数据提取，至少存在如下缺陷：每次提数(提取数据)的前期准备工作量大，需要提前在归并数据库建一些列数据表承接其物理数据库的表数据；且数据需要先期数据归并集中，加工链路长，从而导致效率低下。

发明内容

有鉴于此，本说明书一个或多个实施例的目的在于提出一种跨数据库数据提取方法、装置、电子设备及存储介质，以解决现有技术中的技术问题。

基于上述目的，本说明书一个或多个实施例提供了一种跨数据库数据提取方法，包括：

获取原始提数任务信息；

基于原始提数任务信息输出提数任务列表；

响应于用户从所述提数任务列表中选择的目标提数任务信息及数据提取参数，依据所述目标提数任务信息中的sql脚本分别从不同的数据库中加载满足查询条件的查询结果子集，将所述查询结果子集存入数据库并输出。

作为一种可选的实施方式，所述基于原始提数任务信息输出提数任务列表，包括：

从所述原始提数任务信息中提取特征词；

基于所述特征词进行分词匹配计算信息权重，选取匹配度较高的标准提数任务信息构成提数任务列表；

输出所述提数任务列表。

作为一种可选的实施方式，基于所述特征词进行分词匹配计算信息权重，选取匹配度较高的标准提数任务信息构成提数任务列表，包括：

选取包含所述特征词的标准提数任务信息作为待选提数任务信息；

针对每个待选提数任务信息，计算其匹配度；

按照匹配度从高到低的顺序，将全部待选提取任务信息排序，获得提数任务列表。

作为一种可选的实施方式，所述将所述查询结果子集存入数据库，包括：

将所述查询结果子集存入高斯数据库。

作为本发明的第二个方面，提供了一种跨数据库数据提取装置，包括：

获取模块，用于获取原始提数任务信息；

第一输出模块，用于基于原始提数任务信息输出提数任务列表；

计算与输出模块，用于响应于用户从所述提数任务列表中选择的目标提数任务信息及数据提取参数，依据所述目标提数任务信息中的sql脚本分别从不同的数据库中加载满足查询条件的查询结果子集，将所述查询结果子集存入数据库并输出。

作为一种可选的实施方式，所述第一输出模块包括：

提取单元，用于从所述原始提数任务信息中提取特征词；