[发明专利]一种数据处理方法及装置有效
申请号: | 201711387932.6 | 申请日: | 2017-12-20 |
公开(公告)号: | CN108255955B | 公开(公告)日: | 2020-01-03 |
发明(设计)人: | 龚红祥 | 申请(专利权)人: | 新华三大数据技术有限公司 |
主分类号: | G06F16/25 | 分类号: | G06F16/25 |
代理公司: | 11415 北京博思佳知识产权代理有限公司 | 代理人: | 林祥 |
地址: | 450000 河南省郑州市高新技*** | 国省代码: | 河南;41 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 多个数据库 关联视图 查询请求 搜索引擎 数据处理 查询结果 描述信息 异构 关联 查询 输出 创建 应用 | ||
本发明提供一种数据处理方法及装置,所述方法包括:分别建立搜索引擎与多个数据库的JDBC连接;创建对应所述多个数据库的关联视图,所述关联视图中包括对应所述多个数据库的描述信息;当接收到针对所述关联视图的查询请求时,通过与所述多个数据库的JDBC连接分别从所述多个数据库中获取与所述查询请求关联的数据,并输出包括所获取到的数据的查询结果。应用本发明可以实现搜索引擎的异构查询。
技术领域
本发明涉及大数据处理技术领域,尤其涉及一种数据处理方法及装置。
背景技术
ElasticSearch(简称ES)是一个分布式、面向列的搜索引擎,提供了一个分布式多用户能力的全文搜索引擎,是当前流行的企业级搜索引擎。
然而实践发现,目前的ES实现中,不存在异构查询的相关技术。
发明内容
本发明提供一种数据处理方法及装置,以解决现有ES实现中不存在异构查询的相关技术的问题。
根据本发明实施例的第一方面,提供一种数据处理方法,包括:
分别建立搜索引擎与多个数据库的java数据库连接JDBC连接;
创建对应所述多个数据库的关联视图,所述关联视图中包括对应所述多个数据库的描述信息;
当接收到针对所述关联视图的查询请求时,通过与所述多个数据库的JDBC连接分别从所述多个数据库中获取与所述查询请求关联的数据,并输出包括所获取到的数据的查询结果。
根据本发明实施例的第二方面,提供一种数据处理装置,包括前端视图层、RESTAPI、业务实现层以及数据接入层:其中:
所述数据接入层,用于分别建立搜索引擎与多个数据库的java数据库连接JDBC连接;
所述前端视图层,用于创建对应所述多个数据库的关联视图,所述关联视图中包括对应所述多个数据库的描述信息;
所述前端视图层,还用于当接收到针对所述关联视图的查询请求时,通过所述REST API将所述查询请求传递给所述业务实现层;
所述业务实现层,用于将所述查询请求传递给所述数据接入层;
所述数据接入层,还用于通过与所述多个数据库的JDBC连接分别从所述多个数据库中获取与所述查询请求关联的数据,并将获取到的数据合并传输至所述业务实现层;
所述业务实现层,用于当接收到数据接入层传输的数据时,按照预设数据模型进行组装,并通过REST API将组装后的数据传输至所述前端视图层;
所述前端视图层,用于展示组装后的数据。
应用本发明实施例,通过分别建立搜索引擎与多个数据库的JDBC连接,并创建对应该多个数据库的关联视图,当接收到针对关联视图的查询请求时,通过与该多个数据库的JDBC连接分别从多个数据库中获取与查询请求关联的数据,并输出包括所获取到的数据的查询结果,实现了搜索引擎的异构查询。
附图说明
图1是本发明实施例提供的一种数据处理装置的结构示意图;
图2A是本发明实施例提供的一种异构数据库中的数据格式示意图;
图2B是本发明实施例提供的一种合并后的数据格式示意图;
图3是本发明实施例提供的一种数据处理装置的结构示意图;
图4是本发明实施例提供的一种数据处理装置的硬件结构示意图。
具体实施方式
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于新华三大数据技术有限公司,未经新华三大数据技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201711387932.6/2.html,转载请声明来源钻瓜专利网。