[发明专利]大规模空间数据环境下基于二级索引的通用查询方法有效
申请号: | 201910456427.5 | 申请日: | 2019-05-29 |
公开(公告)号: | CN110147377B | 公开(公告)日: | 2022-12-27 |
发明(设计)人: | 季长清;汪祖民;高杨 | 申请(专利权)人: | 大连大学 |
主分类号: | G06F16/22 | 分类号: | G06F16/22;G06F16/2453 |
代理公司: | 大连智高专利事务所(特殊普通合伙) 21235 | 代理人: | 马庆朝;刘鑫 |
地址: | 116622 辽宁省*** | 国省代码: | 辽宁;21 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 大规模空间数据环境下基于二级索引的通用查询算法,属于数据查询领域,为了解决非行键属性实时范围查询的问题,框架由以下几部分组成:客户端、Spark计算模块、HBase数据处理模块;算法执行如下:在HBase数据处理模块和Spark计算模块的Schema基础上调用SparkContext提供的API建立HBase的原始数据的RDD,RDD经过不断转化形成二级索引存放在Spark Memory中,效果是提高了大规模空间数据范围查询的效率。 | ||
搜索关键词: | 大规模 空间 数据 环境 基于 二级 索引 通用 查询 方法 | ||
【主权项】:
1.一种大规模空间数据环境下基于二级索引的通用查询算法,其特征在于,框架由以下几部分组成:客户端、Spark计算模块、HBase数据处理模块;算法执行如下:在HBase数据处理模块和Spark计算模块的Schema基础上调用SparkContext提供的API建立HBase的原始数据的RDD,RDD经过不断转化形成分布式二级索引存放在SparkMemory中;根据客户端的查询请求并行筛选二级索引模块,筛选出满足查询条件的Rowkey后从HBase中查询数据并返回结果给客户端。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于大连大学,未经大连大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201910456427.5/,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置