[发明专利]一种用于医疗影像数据的基于布隆过滤器的HBase索引设计方法在审
申请号: | 201910070748.1 | 申请日: | 2019-01-25 |
公开(公告)号: | CN109977113A | 公开(公告)日: | 2019-07-05 |
发明(设计)人: | 王丹;陈文杰;赵文兵;杜金莲;付利华;杜晓琳;苏航 | 申请(专利权)人: | 北京工业大学 |
主分类号: | G06F16/22 | 分类号: | G06F16/22;G16H30/20 |
代理公司: | 北京思海天达知识产权代理有限公司 11203 | 代理人: | 刘萍 |
地址: | 100124 *** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 布隆过滤器 医疗影像数据 单独分配 多级索引 二级索引 负载均衡 检索数据 检索效率 热点问题 随机函数 索引设计 假阳性 索引表 误判率 减小 散列 向量 行键 组位 集合 抽样 优化 改进 网络 保证 | ||
1.一种用于医疗影像数据的基于布隆过滤器的HBase多级索引设计方法,其特征在于,包括以下步骤:
步骤1.首先将查询请求发送给查询服务器,HBase Coprocessor协处理器会解析这个查询请求;
步骤2.将查询先通过布隆过滤器过滤;
步骤3.如果通过过滤,那么再去请求索引表;索引表的具体行键设计为region的起始行键+索引名+值+主表的行键;
步骤4.过抽样散列法进行Region的预分区。
2.根据权利要求1所述的用于医疗影像数据的基于布隆过滤器的HBase多级索引设计方法,其特征在于,步骤4具体如下:
步骤1:预估Region数量N;
其中RSXmx为一个RegionServer的内存大小;
habse.regionserver.global.memstore.size以及hbase.hregion.memstore.flush.size采用系统推荐的最优值,从HBase官方文档获取,cf是数据表的列族数,得到了Region的数量N;
步骤2:使用可逆加密算法,将主键散列为随机的字符串;
步骤3:取样,随机取出一定数量的主键,然后按照升序排序将其放到一个集合里;
步骤4:根据预估的分区个数N,对整个集合平均分割,找到分裂点。
3.根据权利要求1所述的用于医疗影像数据的基于布隆过滤器的HBase多级索引设计方法,其特征在于,布隆过滤器过滤时为每一个Hash函数h i(x)使用一个独立的位向量来进行地址映射,从而形成一个向量组V;假设有一个数据集A,x为A中的某个元素,那么向量组V的表示如下所示
其中,V(i,j)表示第i个向量中的第j位。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京工业大学,未经北京工业大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910070748.1/1.html,转载请声明来源钻瓜专利网。