[发明专利]一种集合Lucene和Hbase的电力数据检索系统在审
| 申请号： | 201910469141.0 | 申请日： | 2019-05-31 |
| 公开（公告）号： | CN110297827A | 公开（公告）日： | 2019-10-01 |
| 发明（设计）人： | 郭乃网;吴力波;周阳;马戎;施政昱;陈伟;苏运;田英杰;瞿海妮;张琪祁;时志雄;宋岩;庞天宇;沈泉江 | 申请（专利权）人： | 国网上海市电力公司;复旦大学 |
| 主分类号： | G06F16/22 | 分类号： | G06F16/22;G06F16/2458;G06F16/27 |
| 代理公司： | 上海科盛知识产权代理有限公司 31225 | 代理人： | 叶敏华 |
| 地址： | 200002 上海市浦东新区*** | 国省代码： | 上海;31 |
| 权利要求书： | 查看更多 | 说明书： | 查看更多 |
| 摘要： | |||
| 搜索关键词： | 集群 协处理器 检索系统 存储 电力数据 二级索引 过期数据 检索单元 历史数据 客户端 时间段 集合 实时数据发送 发送 查询条件 返回结果 检索日志 数据建立 第一层 实时性 索引 检索 迁移 输出 | ||
1.一种集合Lucene和Hbase的电力数据检索系统，其特征在于，该系统包括HBase集群、Lucene集群和设于二者之间的协处理器，根据项目对时间的需求，所述的Lucene集群作为第一层检索单元存储30*24小时内的数据，并存储对该时间段内的数据建立的索引，所述的HBase集群作为第二层检索单元，存储335*24小时内的数据以及HBase对该时间段历史数据建立的二级索引。
2.根据权利要求1所述的一种集合Lucene和Hbase的电力数据检索系统，其特征在于，当Lucene集群的数据过期时，该数据作为历史数据移入HBase集群，HBase集群更新二级索引，当HBase集群的数据过期时，HBase集群自动删除并更新自身二级索引，若有新数据输入，新数据插入Lucene集群中，且Lucene集群更新自身索引。
3.根据权利要求2所述的一种集合Lucene和Hbase的电力数据检索系统，其特征在于，该系统的使用流程为：
客户端根据查询条件将实时数据发送至Lucene集群，并将历史数据发送至HBase集群，Lucene集群将过期数据迁移至协处理器，协处理器将二级索引及过期数据发送至HBase集群，经过计算、处理后，Lucene集群、HBase集群输出检索返回结果到客户端。
4.根据权利要求1所述的一种集合Lucene和Hbase的电力数据检索系统，其特征在于，该系统采用Impala和Hive两个检索工具。
5.根据权利要求4所述的一种集合Lucene和Hbase的电力数据检索系统，其特征在于，所述的Impala采用商用并行关系数据库中的分布式查询引擎，该引擎包括Query ExecEngine、Query Coordinator和Query Planner。
该专利技术资料仅供研究查看技术是否侵权等信息，商用须获得专利权人授权。该专利全部权利属于国网上海市电力公司;复旦大学，未经国网上海市电力公司;复旦大学许可，擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作，请联系【客服】
本文链接：http://www.vipzhuanli.com/pat/books/201910469141.0/1.html，转载请声明来源钻瓜专利网。
