[发明专利]一种数据集成方法及装置

说明书

本申请实施例提供一种数据集成方法及装置，涉及数据处理技术领域，该方法包括：获取作业数据，并确定作业数据的作业类型；在预设的跑数模板库中确定与作业类型相匹配的目标跑数模板；根据目标跑数模板获取作业数据的配置参数；根据目标跑数模板和配置参数对作业数据进行数据集成处理。可见，实施这种实施方式，能够提高数据资源的一致性和互用性，增加数据资源价值的发挥空间。

技术领域

本申请涉及数据处理技术领域，具体而言，涉及一种数据集成方法及装置。

背景技术

目前，随着IT应用建设的发展，数据成为了最重要的资源，无论是当下的业务系统、应用软件抑或是数据中心，皆是以数据资源为核心并依托对数据资源价值的发挥而存在和发展的。然而，在实践中发现，不同部门、不同单位以及不同层级等情况下的数据库皆处于分散、独立的状况，从而导致了数据资源的一致性和互用性较差，减少了数据资源价值的发挥空间。

发明内容

本申请实施例的目的在于提供一种数据集成方法及装置，能够提高数据资源的一致性和互用性，增加数据资源价值的发挥空间。

本申请实施例第一方面提供了一种数据集成方法，包括：

获取作业数据，并确定所述作业数据的作业类型；

在预设的跑数模板库中确定与所述作业类型相匹配的目标跑数模板；

根据所述目标跑数模板获取所述作业数据的配置参数；

根据所述目标跑数模板和所述配置参数对所述作业数据进行数据集成处理。

在上述实现过程中，该方法可以优先获取作业数据，并根据作业数据来确定其具体的作业类型；在确定出作业数据的作业类型之后，再根据该作业类型在跑数模板库中匹配相应的目标跑数模板；在匹配到目标跑数模板之后根据目标跑数模板中的构造获取作业数据中的关键数据，作为目标跑数模板中的配置参数；以使该目标跑数模板可以根据上述配置参数对作业数据进行数据集成处理，即跑数处理。可见，实施这种实施方式，能够根据作业数据的类型来进行精准跑数，实现高精度的数据集成；同时，还能够通过预设的跑数模板来限定作业数据的具体类型，以使跑数不会产生意外的结果，从而保证了数据集成的稳定性与准确性；另外，根据作业数据的配置参数进行目标跑数模板的参数配置能够更准确、快速地对作业数据进行数据集成处理，从而能够提高数据集成效率；最后，该方法还能够通过作业数据的准确识别和跑数模板库的设立来提高数据资源的一致性和互用性，从而大大提高了数据资源价值的发挥空间。

进一步地，在所述获取作业数据，并确定所述作业数据的作业类型的步骤之前，所述方法还包括：

获取多个跑数处理流程图；

确定与所述多个跑数处理流程图一一对应的多个运行数据；

根据所述多个跑数处理流程图和所述多个运行数据，构建多个跑数模板；

对所述多个跑数模板进行汇总，得到预设的跑数模板库。

在上述实现过程中，该方法可以优先获取多个跑数处理的流程图，然后根据跑数处理流程图确定出多个运行数据，并在多个运行数据确定出来之后，根据每个运行数据和对应的跑数处理流程图构建出多个跑数模板，然后将多个跑数模板汇总组合成预设的跑数模板库。可见，实施这种实施方式，可以实现一种预设的跑数模板库的生成方式，从而使得数据集成的方法可以根据所需要的模板被定制，进而使得数据集成具有更多的选择空间和进化空间，并进一步增强了数据资源一致性与互用性，便于数据资源在各个方面的使用。

进一步地，所述多个跑数处理流程图中的跑数处理流程图包括至少一个执行节点；所述多个运行数据中的运行数据包括与每个执行节点对应的运行包、与每个执行节点对应的执行算法以及与每个执行节点对应的运行参数。