[发明专利]一种数据集成方法在审
申请号: | 201410123611.5 | 申请日: | 2014-03-31 |
公开(公告)号: | CN103927344A | 公开(公告)日: | 2014-07-16 |
发明(设计)人: | 王勇;曲晓白;吴光州;王立峰 | 申请(专利权)人: | 国网山东省电力公司 |
主分类号: | G06F17/30 | 分类号: | G06F17/30 |
代理公司: | 济南诚智商标专利事务所有限公司 37105 | 代理人: | 王汝银 |
地址: | 250001 山*** | 国省代码: | 山东;37 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 数据 集成 方法 | ||
技术领域
本发明涉及一种数据集成技术领,具体地说是一种数据集成方法。
背景技术
在企业中,由于开发时间或开发部门的不同,往往有多个映射的、运行在不同的软硬件平台上的信息系统同时运行,这些系统的数据源彼此独立、相互封闭,使得数据难以在系统之间交流、共享和融合。因此非常需要对已有的信息进行整合,共享信息。
数据集成是指将不同来源、格式、特点性质的数据在逻辑或物理上有机地集中,也就是将来自不同的源端数据库中的数据在逻辑或物理上有机的集中后形成目的端数据库中的数据,通过数据集成可以为企业提供全面的数据共享。
数据集成提供了在一个企业主计算机上存储的后端信息的一幅镜像。当一个客户需要检查一项订单的状态时,这项查询就被转移到数据集成软件。因此,并非总需要访问该企业的主计算机。数据集成软件拥有足够的智能,知道什么时候与主计算机保持同步以便使数据不断更新。为电子商务应用集成ERP数据是通过数据分级和直接访问ERP数据这两者的结合来完成的,它包括使用一个数据服务器和一些数据高速缓存器。数据集成软件以智能方式将直接实时的和分批的数据存取方法混和起来,以便从一个ERP系统中抽取数据。
在对数据集成的研究过程中,仍需注重以下问题:(1)关系数据模型与基于XML的半结构化数据问的映射,要保证映射前后数据的完整性及一致性约束;(2)半结构化数据全局模式的构建方法和映射方法,同样要保证数据的完整性和一致性约束能够在半结构化的数据问传递:(3)数据集成过程中安全可靠的数据传输。
在XML、Web Services及网格计算等技术规范的推动下,数据集成中的一些难题将会得到很好的解决,数据集成的应用也会更加广泛。
发明内容
为克服上述现有技术存在的不足,本发明提供了一种数据集成方法。
本发明解决其技术问题所采取的技术方案是:一种数据集成方法,其特征是,包括
接收数据集成信息;
在源端数据库中查找相应的数据源;
将数据源的数据映射到目的数据上;
传输所述目的数据给目的端数据库。
进一步地,所述将数据源的数据映射到目的数据上的过程就是将所有数据源的数据集成为全局模式数据。
优选地,所述全局模式数据包括数据源的数据结构、字段信息和数据操作。
优选地,所述数据源的数据集成为全局模式数据的过程就是对数据源进行数据提取、验证、清理、整合、聚集和装入的处理过程。
进一步地,所述将数据源的数据映射到目的数据上的过程就是确定一个数据源为目标数据源并通过数据传输方式将其它数据源的数据复制到目标数据源上。
进一步地,所述通过数据传输方式将其它数据源的数据复制到目标数据源上的过程就是数据源主动推送数据到目标数据源上或者目标数据源主动从数据源中抽取数据的过程。
进一步地,所述将数据源的数据映射到目的数据上的过程就是确定一个数据源为目标数据源并通过数据复制触发方式将其它数据源的数据复制到目标数据源上。
进一步地,所述通过数据复制触发方式将其它数据源的数据复制到目标数据源上的过程就是通过数据复制触发事件来启动其它数据源到目标数据源上的数据复制,所述据复制触发事件包括数据变化触发事件、批量触发事件、客户调用触发事件和定时触发事件。
更近一步地,上述方法中所述的数据映射包括语法映射和字段映射;
所述语法映射就是将数据源的命名规则和数据类型映射为目的数据的命名规则和数据类型;
所述字段映射就是将数据源的内容和含义映射为目的数据的内容和含义,字段映射包括字段拆分、字段合并、字段数据格式变换和字段转移。
本发明的有益效果是:本发明通过将所有数据源的数据集成为全局模式数据,使用户能够按照全局模式透明地访问数据源的数据, 通过将其它数据源的数据复制到目标数据源上,可以维护数据源的数据一致性,提高了信息共享利用的效率;通过源端与目的端间的数据转换从而达到数据集成目的,解决了数据的分布性和映射性的问题。
附图说明
下面结合附图对本发明进一步说明:
图1是本发明的方法流程图;
图2是本发明所述语法映射的示意图;
图3是本发明所述字段拆分的示意图;
图4是本发明所述字段合并的示意图;
图5是本发明所述字段数据格式变换的示意图;
图6是本发明所述字段转移的示意图。
具体实施方式
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于国网山东省电力公司,未经国网山东省电力公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201410123611.5/2.html,转载请声明来源钻瓜专利网。
- 上一篇:基于数据量的查询连接方法
- 下一篇:网页获取方法及装置
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置