[发明专利]一种基于动态索引结构的海量数据实时查询方法有效
申请号: | 201310648180.X | 申请日: | 2013-12-04 |
公开(公告)号: | CN103678550A | 公开(公告)日: | 2014-03-26 |
发明(设计)人: | 陈丹伟;庄俊 | 申请(专利权)人: | 南京邮电大学 |
主分类号: | G06F17/30 | 分类号: | G06F17/30 |
代理公司: | 南京知识律师事务所 32207 | 代理人: | 胡玲 |
地址: | 210003 江苏*** | 国省代码: | 江苏;32 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明公开一种基于动态索引结构(DC-Tree)的海量数据实时查询方法,该方法是将海量多维数据集降维,支持高空间效率低查询时间的方法,并支持分布式冗余存储,从而提升了传统分布式机制中数据分配的效率,适应大规模数据的处理;该方法包括:多维数据记录DR通过MasterNode中Z Curve映射函数fz,生成降维结果集S;MasterNode选定k个哈希函数,通过Bloom Filter对结果集S进行映射,生成节点集NN;更新数据记录DR,对节点集NN中每个元素实行动态构建;用户User查询MDS结果,通过步骤1、步骤2获得节点集NN,启用并行查询方法;用户User对节点集NN中所有访问节点的结果集进行聚合,得到最终查询结果Rset。 | ||
搜索关键词: | 一种 基于 动态 索引 结构 海量 数据 实时 查询 方法 | ||
【主权项】:
一种基于动态索引结构的海量数据实时查询方法,其特征在于,所述方法包含如下步骤:步骤1:多维数据记录DR通过MasterNode中Z Curve映射函数fz,生成降维结果集S;步骤2:MasterNode选定k个哈希函数,通过Bloom Filter对结果集S进行映射,生成节点集NN;步骤3:更新数据记录DR,对节点集NN中每个元素实行动态构建;步骤4:用户User查询MDS结果,通过步骤1、步骤2获得节点集NN,启用并行查询方法;步骤5:用户User对节点集NN中所有访问节点的结果集进行聚合,得到最终查询结果Rset。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于南京邮电大学,未经南京邮电大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201310648180.X/,转载请声明来源钻瓜专利网。
- 上一篇:提供问题解决方案的方法、服务器和系统
- 下一篇:进行网络资源聚类的方法及装置