[发明专利]一种异构数据同步实现方法

说明书

 

技术领域

本发明涉及一种在统一的数据发布平台上实现异构数据库结构及数据同步的方法，其特点是基于Web Services技术，以及中间件理念，并采用多宗措施保证数据传输过程的安全性。

背景技术

信息产生后，会被不同的子系统或外部系统使用，各子系统或外部系统对数据的存储和使用方式各不相同，于是，针对不同的子系统或外部系统的数据转换工作会占用大量的时间和人力资源。

各大主流数据库产品中采用发布/订阅模式实现了数据同步功能，但未提供异构数据库结构的同步功能。另外，已经存在的异构数据库同步工具虽然能够实现数据库结构的同步，但是，每多出一个子系统或者外部系统，都要围绕同步功能对工具本身进行修改，不仅工作量巨大，代码的可维护性也得不到保证。而且，这些同步工具对安全性方面的考虑非常少，还需要参与同步的计算机开放额外的端口，这使得其在互联网上的应用收到局限。

发明内容

本发明所要解决的技术问题是提供一种在互联网环境的任意两个数据库之间实现数据结构和数据的同步方法，这种同步方法完全基于统一的平台的，对不同子系统或外部系统的支持在平台上完全是可插拔式的。

一种异构数据同步实现方法，其特征在于包括以下步骤：

1）发布客户端定时调用收集dll组件扫描发布客户端自身的源数据库，提取新数据，之后将收集的新数据按照所要求的格式SOAP封装成XML格式的数据包并上传至服务器， 

2）收集客户端定时调用下载进程下载XML格式的数据包，下载完成后将新下载的数据包按照不同应用的需求进行分类队列管理，然后调用转档dll组件将相应队列中的数据包还原安装到对应的应用中。

所述步骤1）的具体过程为：

1.1）发布客户端的调度进程按时启动收集dll组件；

1.2）收集dll组件从收集配置表中获取收集配置参数；

1.3）以上一次收集开始时间为界限，扫描相关的数据库，根据收集配置参数从源数据库中获取符合条件的数据；

1.4）获取同一资讯类型的所有级别，按顺序将级别相同的资讯数据SOAP封装到一个数据包中，每种级别都生成一个XML数据包，将该数据包的相关信息存储到数据包状态表中；

1.5）将XML数据包进行压缩操作；

1.6）调度进程向服务器发出上传请求；

1.7）调度进程在获得服务器准许上传的回复后将数据包上传至服务器。

其中，步骤1.1）中的收集dll组件是一个dll收集驱动组件的集合，每种类型的数据都对应一个dll收集驱动组件，相应的收集整理封装操作由dll收集驱动组件完成。

所述步骤2）的具体过程为：

2.1）收集客户端的调度进程按时向服务器提出下载请求；

2.2）服务器根据发出下载请求的进程相关身份信息准备预下载的XML数据并返回给调度进程；

2.3）下载完成后，调度进程将XML数据包解压缩并按照数据包类型进行数据分配；

2.4）调度进程启动相应转档dll组件；

2.5）转档dll组件从转档配置表中获取转档配置参数；

2.6）转档dll组件根据转档配置参数将数据还原成各应用对应的数据存放位置。

其中步骤2.4）中的转档dll组件是一个dll转档驱动组件的集合，每种类型的数据都对应一个dll转档驱动组件，相应的还原操作由dll转档驱动组件完成。

本发明的有益效果：

1、数据传输基于HTTP方式，不需要参与同步的计算机开放特定的端口。