[发明专利]数据抽取及转化的方法和装置在审
申请号: | 201910806087.4 | 申请日: | 2019-08-29 |
公开(公告)号: | CN110515934A | 公开(公告)日: | 2019-11-29 |
发明(设计)人: | 马国春;张辉帅;董心景;崔永发;王诗博;陆轶杰;周琳华 | 申请(专利权)人: | 上海众恒信息产业股份有限公司 |
主分类号: | G06F16/215 | 分类号: | G06F16/215;G06F16/25 |
代理公司: | 31254 上海集信知识产权代理有限公司 | 代理人: | 周成<国际申请>=<国际公布>=<进入国 |
地址: | 200040 上海*** | 国省代码: | 上海;31 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明提出一种数据抽取及转化的方法,该方法从异构数据库中抽取数据,将数据转化后保存到综合数据库中,该方法包括:数据抽取步骤、代码获取步骤、数据清洗步骤、转换步骤、数据集成步骤、数据装载步骤和数据校验步骤。本发明还提出一种数据抽取及转化的装置,该装置包括:存储组件、数据抽取组件、代码获取组件、数据清洗组件、转换组件、数据集成组件、数据装载组件和数据校验组件。本发明的数据抽取及转化的方法和装置能够对如何对异构数据库中的数据进行整合,将异构数据库中的数据整合到统一的综合数据库中。 | ||
搜索关键词: | 数据抽取 异构数据库 综合数据库 代码获取 数据集成 数据清洗 数据校验 数据装载 转化 方法和装置 抽取数据 存储组件 数据整合 数据转化 转换组件 整合 保存 转换 统一 | ||
【主权项】:
1.一种数据抽取及转化的方法,其特征在于,该方法从异构数据库中抽取数据,将数据转化后保存到综合数据库中,该方法包括:/n数据抽取步骤,从异构数据库中抽取数据并保存到转储数据库中,在转储数据库中的数据保留原始状态;/n代码获取步骤,从异构数据库中获取代码并保存到代码库中,在代码库中的代码保留原始状态;/n数据清洗步骤,对转储数据库中的数据应用清洗规则,未通过清洗的数据为首批问题数据,将首批问题数据保存到问题数据库中;/n转换步骤,对经清洗的数据进行数据转换,对代码库中的代码进行代码转换;/n数据集成步骤,对经转换的数据进行集成,建立数据之间的关联关系;/n数据装载步骤,将经集成的数据和经转换的代码保存到综合数据库中;/n数据校验步骤,对综合数据库中的数据应用校验规则,未通过校验的数据为次批问题数据,将次批问题数据从综合数据库中移出并保存到问题数据库中。/n
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于上海众恒信息产业股份有限公司,未经上海众恒信息产业股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201910806087.4/,转载请声明来源钻瓜专利网。