[发明专利]一种数据抽取的方法及装置在审
申请号: | 201410737681.X | 申请日: | 2014-12-05 |
公开(公告)号: | CN104462348A | 公开(公告)日: | 2015-03-25 |
发明(设计)人: | 班军成;郭庆;解元;谭超;谢莹莹;徐学辉 | 申请(专利权)人: | 无锡城市云计算中心有限公司 |
主分类号: | G06F17/30 | 分类号: | G06F17/30 |
代理公司: | 北京新知远方知识产权代理事务所(普通合伙) 11397 | 代理人: | 侯俊丽 |
地址: | 214131 江苏省无锡市震泽*** | 国省代码: | 江苏;32 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 数据 抽取 方法 装置 | ||
1.一种数据抽取的方法,其特征在于,包括如下步骤:
接收数据抽取请求,所述数据抽取请求是根据用户选择的数据抽取策略生成的,所述数据抽取策略与大数据平台类型具有对应关系;
根据所述数据抽取请求确定对应的大数据平台类型;
根据确定的大数据平台类型将数据抽取请求封装为所述大数据平台可识别的数据抽取指令;
发送数据抽取指令至对应的大数据平台,所述大数据平台进行数据抽取;
确定数据抽取的数据结果集。
2.如权利要求1所述的方法,其特征在于,进一步包括:
通过大数据平台类型扩展接口加载大数据平台类型。
3.如权利要求1或2所述的方法,其特征在于,所述接收数据抽取请求之后,进一步包括:
对使用HTTPS协议加密的数据抽取请求进行解密获得未加密的数据抽取请求。
4.如权利要求1至3任一所述的方法,其特征在于,所述发送数据抽取指令至对应的大数据平台之前,进一步包括:
对数据抽取指令进行加密。
5.如权利要求1至4任一所述的方法,其特征在于,所述确定数据抽取的数据结果集之前,进一步包括:
对从大数据平台获取的加密的数据结果集进行解密。
6.如权利要求4或5所述的方法,其特征在于,所述加密方法为采用非对称加密算法。
7.如权利要求1至6任一所述的方法,其特征在于,所述确定数据抽取的数据结果集之后,进一步包括:
将所述数据结果集进行展示和/或导出。
8.如权利要求1至7任一所述的方法,其特征在于,在接收到数据抽取请求之后,进一步包括:
确定用户是否具有执行所述数据抽取策略的权限。
9.一种数据抽取的装置,其特征在于,包括:
数据抽取接口,用于接收数据抽取请求,所述数据抽取请求是根据用户选择的数据抽取策略生成的,所述数据抽取策略与大数据平台类型具有对应关系;
数据抽取引擎,用于根据所述数据抽取请求确定对应的大数据平台类型;
大数据平台代理,用于根据确定的大数据平台类型将数据抽取请求封装为所述大数据平台可识别的数据抽取指令;
大数据平台代理进一步用于发送数据抽取指令至对应的大数据平台,所述大数据平台进行数据抽取;
数据抽取引擎进一步用于确定数据抽取的数据结果集。
10.如权利要求9所述的装置,其特征在于,进一步包括:
加载模块,用于通过大数据平台类型扩展接口加载大数据平台类型。
11.如权利要求9或10所述的装置,其特征在于,所述数据抽取接口进一步用于在接收数据抽取请求之后,对使用HTTPS协议加密的数据抽取请求进行解密获得未加密的数据抽取请求。
12.如权利要求9至11任一所述的装置,其特征在于,所述大数据平台代理进一步用于在发送数据抽取指令至对应的大数据平台之前,对数据抽取指令进行加密。
13.如权利要求9至12任一所述的装置,其特征在于,所述数据抽取引擎进一步用于在确定数据抽取的数据结果集之前,对从大数据平台获取的加密的数据结果集进行解密。
14.如权利要求12或13所述的装置,其特征在于,所述大数据平台代理和/或数据抽取引擎采用的加密方法为非对称加密算法。
15.如权利要求9至14任一所述的装置,其特征在于,所述数据抽取引擎进一步用于在确定数据抽取的数据结果集之后,将所述数据结果集进行展示和/或导出。
16.如权利要求9至15任一所述的装置,其特征在于,所述数据抽取接口进一步用于在接收到数据抽取请求之后,确定用户是否具有执行所述数据抽取策略的权限。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于无锡城市云计算中心有限公司,未经无锡城市云计算中心有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201410737681.X/1.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置