[发明专利]一种复杂系统异构数据信息一致性协同处理方法、系统及储存介质

说明书

本申请属于数据集成技术领域，且公开了一种复杂系统异构数据信息一致性协同处理方法、系统及储存介质，通过数据集成处理区响应异构数据信息应用处理交互区发布任务并对底层数据库分区内各个异构数据源发布子任务执行，使复杂系统中异构数据信息可以实时同步一致更新，从而具有对同一系统下一部分数据源进行更新或删改操作之后，同步的对整个系统内所有异构数据源进行实时协同更新的效果，同时底层数库分区中各个异构数据源在执行任务之后可通过数据集成处理区整合任务处理结果反馈至异构数据信息应用处理交互区供用户浏览。

技术领域

本申请属于数据集成技术领域，具体是一种复杂系统异构数据信息一致性协同处理方法、系统及储存介质。

背景技术

目前随着大数据时代的到来和知识经济的深入发展，企业、研究所等研发和生产机构愈发重视对知识的管理，实施了许多信息化软件，并产生了大量的数据，分别存储于不同的数据库中。而相对独立、缺乏组织的知识难以发挥充分的价值，因此需要通过对异构数据库的集成将这些资源进行有效的整合。

这些数据库具有系统异构、结构异构等特点，称为异构数据库。常规的集成方法多采取定制的方式，对现有的异构数据库进行集成，且要求在集成之前，完成对这些数据库结构的读取工作，为后期构建检索语句提供基础，此步骤是实现集成方法的重要部分。而当用户提出新的需求时，则需要人工对平台进行维护和改进，是一个漫长而复杂的过程。而在异构数据源的集成过程中，存在实时同步的要求，其是指某一节点发生数据变化时，立即更新到其它节点，从而保证任何时间任何节点的数据均保持一致。对于异构数据源，其对于相同数据的数据结构、数据模式可能存在不一致现象，因此他们对于数据的同步并非简单的“转存”，这时就需要建立合理的机制来保证数据在异构数据源中的实时同步。

发明内容

本申请的目的一是针对以上问题，本申请提供了一种复杂系统异构数据信息一致性协同处理方法、系统及储存介质，使复杂系统中异构数据信息可以实时同步一致更新，从而具有对同一系统下一部分数据源进行更新或删改操作之后，同步的对整个系统内所有异构数据源进行实时协同更新的效果。

本申请的发明目的是通过以下技术方案得以实现的：

本申请的发明目的一是提供一种复杂系统异构数据信息一致性协同处理方法，包括如下步骤：

S1、建立由底层各个异构数据源构成底层数据库分区，建立用于处理异构数据源的数据集成处理区，建立异构数据信息应用处理交互区；且建立网络链路，用于实现数据集成处理区与底层数据库分区之间的通信链接以及数据集成处理区与异构数据信息应用处理交互区之间的通信链接；

S2、在数据集成处理区中对底层数据库分区中的各个异构数据源进行注册，并建立数据集成处理库中数据同步转换处理以及任务调度过程；

S3、封装数据集成处理区中数据同步转换处理以及任务调度过程；

S4、在异构数据信息应用处理交互区对任意数据进行操作，数据集成处理区将被处理数据信息同步至底层数据库分区中各个异构数据源中。

通过采用上述技术方案，建立一个由底层各个异构数据源构成的底层数据库分区，方便对物理位置不同的各个不同数据源进行同一级管理和统一维护，使得各个异构数据源可以在同一级别被查询调用；异构数据信息应用处理交互区可以方便用户进行数据操作，并且用户可以在异构数据信息应用处理交互区直观的对各个异构数据源的信息进行观测、查询、调用、更新以及增删操作；同时建立数据集成处理分区可以底层数据库分区中的各个异构数据源信息包装后传递至异构数据信息应用处理交互区，且数据集成处理区可以实时检测底层数据库分区中各个数据源内的信息，从而实时的将底层数据库中各个数据源的信息反馈至异构数据信息应用处理交互区；数据集成处理区可以响应用户在有够数据信息应用处理交互区输入的操作指令，形成对底层数据库分区查询、调用、更新以及增删的任务，之后将任务分析处理之后包装发布至底层数据库有分区，底层数据库分区中各个数据源执行任务并将任务执行结果反馈至数据集成处理区，数据集成处理区将各个数据源中任务执行结果合并整理发送至异构数据信息应用处理交互区。