[发明专利]Oracle数据抽取方法、系统、设备及计算机介质有效
申请号: | 201811319314.2 | 申请日: | 2018-11-07 |
公开(公告)号: | CN109492041B | 公开(公告)日: | 2020-12-15 |
发明(设计)人: | 张亮;褚占峰;江峰 | 申请(专利权)人: | 杭州数梦工场科技有限公司 |
主分类号: | G06F16/25 | 分类号: | G06F16/25 |
代理公司: | 北京集佳知识产权代理有限公司 11227 | 代理人: | 罗满 |
地址: | 310024 浙江省杭州市*** | 国省代码: | 浙江;33 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | oracle 数据 抽取 方法 系统 设备 计算机 介质 | ||
本申请公开了一种Oracle数据抽取方法、系统、设备及计算机介质,该方法包括:获取Oracle数据库中的待分类数据;获取待分类数据在Oracle数据库中的ROWID值;基于ROWID值对待分类数据进行数据抽取。本申请公开的一种Oracle数据抽取方法,基于Oracle数据库中待分类数据的ROWID值来对待分类数据进行数据抽取,可以借助对规律的ROWID值进行数据抽取来实现对杂乱无章的待分类数据的抽取,与现有技术中直接对杂乱无章的待分类数据进行数据抽取相比,提高了Oracle数据抽取方法的抽取效率。本申请公开的一种Oracle数据抽取系统、设备及计算机可读存储介质也解决了相应技术问题。
技术领域
本申请涉及数据库数据抽取技术领域,更具体地说,涉及Oracle数据抽取方法、系统、设备及计算机介质。
背景技术
随着社会的发展,大数据的兴起,业务系统的数据量越来越大,Oracle数据库的应用也越来越广泛,ETL是将业务系统的数据经过抽取、清洗转换之后加载到数据仓库的过程,其中E(Extract)数据的抽取是整个过程的第一步,在将数据加载到数据仓库的过程中,需要对Oracle数据库中的数据进行抽取。
现有的一种Oracle数据抽取方法是采用分片数据抽取方法对数据进行抽取,也即将一个数据抽取任务拆分成多个子任务,之后可以同时并行执行多个子任务,提高数据抽取的效率。
然而,现有的分片数据抽取方法中,由于Oracle数据库中的数据分布没有规律,即使采用分片数据抽取方法对Oracle数据库中的数据进行分片抽取,也会由于数据的拆分不均而使分片数据抽取的效率较低。
综上所述,如何提高Oracle数据抽取方法的抽取效率是目前本领域技术人员亟待解决的问题。
发明内容
本申请的目的是提供一种Oracle数据抽取方法,其能在一定程度上解决如何提高Oracle数据抽取方法的抽取效率的技术问题。本申请还提供了一种Oracle数据抽取系统、设备及计算机可读存储介质。
为了实现上述目的,本申请提供如下技术方案:
一种Oracle数据抽取方法,包括:
获取Oracle数据库中的待分类数据;
获取所述待分类数据在所述Oracle数据库中的ROWID值;
基于所述ROWID值对所述待分类数据进行数据抽取。
优选的,所述基于所述ROWID值对所述待分类数据进行数据抽取,包括:
采用并行数据抽取方法,基于所述ROWID值对所述待分类数据进行数据抽取。
优选的,所述基于所述ROWID值对所述待分类数据进行分片抽取,包括:
将ROWID的基础字符进行均分,得到相应组数的分组字符;
确定所述ROWID中的分类标志位;
对于每一组所述分组字符,在所述ROWID值中,抽取出所述分类标志位上的字符属于所述分组字符的所述ROWID值,确定属于所述分组字符的所述ROWID值对应的所述待分类数据为所述分组字符的待分类数据抽取结果。
优选的,所述将ROWID的基础字符进行均分,包括:
按照预设顺序对所述ROWID的基础字符进行排序;
按照均分组数对排序后的所述ROWID的基础字符进行均分。
优选的,所述按照预设顺序对所述ROWID的基础字符进行排序,包括:
按照ASCII码顺序对所述ROWID的基础字符进行排序。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于杭州数梦工场科技有限公司,未经杭州数梦工场科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201811319314.2/2.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置