[发明专利]基于条件下推elasticsearch的hive索引方法在审

专利信息
申请号: 201911378666.X 申请日: 2019-12-27
公开(公告)号: CN111159185A 公开(公告)日: 2020-05-15
发明(设计)人: 于伟 申请(专利权)人: 紫光云(南京)数字技术有限公司
主分类号: G06F16/22 分类号: G06F16/22;G06F16/242;G06F16/2455
代理公司: 暂无信息 代理人: 暂无信息
地址: 210000 江苏省南京市浦口区江浦街*** 国省代码: 江苏;32
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 基于 条件 下推 elasticsearch hive 索引 方法
【权利要求书】:

1.基于条件下推elasticsearch的hive索引方法,其特征在于,包括步骤:

(1)在elasticsearch引擎中建立hive原始数据表的索引表;

(2)建立索引表与hive原始数据表的关联外键,使得条件下推到Elasticsearch引擎后Elasticsearch引擎的查询结果为hive原始数据表的属性;

(3)hive引擎获取DDL查询语句,将DDL查询语句转换为Elasticsearch存储引擎可执行的查询语句,并下推到Elasticsearch引擎;

(4)Elasticsearch引擎执行查询动作,然后返回查询结果;

(5)hive引擎根据Elasticsearch引擎返回的属性信息查询hive原始数据表,将查询结果返回客户端。

2.根据权利要求1所述的基于条件下推elasticsearch的hive索引方法,其特征在于,所述将DDL查询语句转换为Elasticsearch存储引擎可执行的查询语句的具体步骤包括:将DDL查询语句解析成抽象语法树,获取抽象语法树的查询表达式;解析查询表达式的restful查询部分;通过DSLBuilder创建Elasticsearch restful查询语句。

3.根据权利要求2所述的基于条件下推elasticsearch的hive索引方法,其特征在于,获取抽象语法树的查询表达式的方法为:

通过hive udf函数match(String)获取抽象语法树的查询表达式,函数match(String)的参数String为Elasticsearch的查询语句。

4.根据权利要求2所述的基于条件下推elasticsearch的hive索引方法,其特征在于,还包括步骤:

当hive原始数据表的有插入/删除/修改操作时,hive引擎根据hive原始数据表的操作信息生成hive原始数据表更新数据至索引表更新数据的逻辑,并根据生成的逻辑更新索引表。

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于紫光云(南京)数字技术有限公司,未经紫光云(南京)数字技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/201911378666.X/1.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top