[发明专利]一种数据集成系统及方法

说明书

本发明实施例提供一种数据集成系统及方法，包括：数据集成任务模块，基于Eclipse RCP平台构建得到，连接多个数据源，根据控制模块发送的数据集成指令，从多个数据源中提取待处理数据，并生成对应的数据集成任务，以供执行模块对待处理数据进行处理；执行模块，用于执行数据集成任务，对待处理数据进行分析处理，将符合预设条件的目标数据集成到目标数据库，以供用户终端调取目标数据；控制模块，用于发送数据集成指令到数据集成任务模块，并对执行模块进行调度控制，将目标数据发送到用户终端。本发明实施例为非专业编程人员提供可视化操作，避免复杂的编程语法，保证了数据集成方案的交付标准统一，减轻了后续维护工作量，提高了数据集成的质量。

技术领域

本发明实施例涉及数据处理技术领域，尤其涉及一种数据集成系统及方法。

背景技术

在企业中，由于开发时间或开发部门的不同，往往有多个异构的、运行在不同的软硬件平台上的信息系统同时运行，这些系统的数据源彼此独立、相互封闭。在实施数据共享的过程当中，由于数据可能来自不同的途径，其数据内容、数据格式和数据质量千差万别，有时甚至会遇到数据格式不能转换或数据转换格式后丢失信息等问题，严重阻碍了数据在各部门和各软件系统中的流动与共享。

为了将这些分布的、异构的数据信息进行整合，需要进行数据集成。现有的数据集成方案，一般是有开发基础的实施人员，根据业务需要，进行软件编码，实现数据库和软件系统之间的数据同步等数据集成工作。然而，目前的数据集成方法对实施人员要求高，会造成交付的标准不统一。数据集成的质量和后期维护难以保证，导致资源投入较大。

因此，现在亟需一种数据集成系统及方法来解决上述问题。

发明内容

针对现有技术存在的问题，本发明实施例提供一种数据集成系统及方法。

第一方面，本发明实施例提供了一种数据集成系统，包括：数据集成任务模块、执行模块和控制模块，其中：

所述数据集成任务模块，基于Eclipse RCP平台构建得到，连接多个数据源，根据所述控制模块发送的数据集成指令，从多个数据源中提取待处理数据，并生成对应的数据集成任务，以供所述执行模块对所述待处理数据进行处理；

所述执行模块，用于执行所述数据集成任务，对所述待处理数据进行分析处理，将符合预设条件的目标数据集成到目标数据库，以供用户终端调取所述目标数据；

所述控制模块，用于发送所述数据集成指令到所述数据集成任务模块，并对所述执行模块进行调度控制，将所述目标数据发送到所述用户终端。

第二方面，本发明实施例提供了一种基于第一方面所述的数据集成系统的数据集成方法，包括：

获取用户终端发送的数据集成请求；

根据所述数据集成请求从多个数据源中提取待处理数据，并生成对应的数据集成任务；

对所述数据集成任务的待处理数据进行分析处理，将符合预设条件的目标数据集成到目标数据库，以供用户终端调取所述目标数据。

第三方面，本发明实施例提供一种电子设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，所述处理器执行所述程序时实现如第二方面所提供的方法的步骤。

第四方面，本发明实施例提供一种非暂态计算机可读存储介质，其上存储有计算机程序，该计算机程序被处理器执行时实现如第二方面所提供的方法的步骤。

本发明实施例提供的一种数据集成系统和方法，通过基于Eclipse RCP平台构建得到的数据集成任务模块为非专业编程人员提供可视化操作，并将数据集成需求自动生成相应的数据集成任务，通过执行模块完成数据集成工作，避免复杂的编程语法，降低终端用户的使用难度，保证了数据集成方案的交付标准统一，减轻了后续维护工作量，提高了数据集成的质量。