[发明专利]一种基于物联网的多数据源联合查询系统及其查询方法在审
申请号: | 202111371664.5 | 申请日: | 2021-11-18 |
公开(公告)号: | CN114201527A | 公开(公告)日: | 2022-03-18 |
发明(设计)人: | 余芸;明哲;崔焱;李文俊 | 申请(专利权)人: | 南方电网数字电网研究院有限公司 |
主分类号: | G06F16/2458 | 分类号: | G06F16/2458;G06F8/41;G06F16/242;G06F16/2455;G06F16/248;G06F16/28 |
代理公司: | 广东华律专利代理事务所(普通合伙) 44802 | 代理人: | 李林生 |
地址: | 510000 广东省广州市黄*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 基于 联网 多数 联合 查询 系统 及其 方法 | ||
1.一种基于物联网的多数据源联合查询系统,其特征在于,包括多数据源连接管理单元、中间件模块、JDBC引擎模块、数据计算模块、编译执行模块、查询日志分析单元和查询监控单元,所述多数据源连接管理单元与中间件模块电性连接,所述中间件模块与JDBC引擎模块电性连接,所述JDBC引擎模块与数据计算模块电性连接,所述数据计算模块与编译执行模块电性连接,所述编译执行模块与查询日志分析单元和查询监控单元均电性连接;
所述多数据源连接管理单元用于连接数据源并进行信息配置;
所述中间件模块用于连通不同的数据源;
所述JDBC引擎模块用于数据合并分析;
所述数据计算模块用于计算数据;
所述编译执行模块用于将执行计划进行动态编译;
所述查询日志分析单元用于记录日志信息;
所述查询监控单元用于记录运行状态信息。
2.根据权利要求1所述的一种基于物联网的多数据源联合查询系统,其特征在于:所述多数据源连接管理单元包括多数据源连接模块、元数据缓存模块和数据连接管理模块,其中,
所述多数据源连接模块用于添加数据源连接,并进行信息配置;
所述元数据缓存模块用于自定义缓存周期;
所述数据连接管理模块用于数据源连接信息进行增删改管理维护。
3.根据权利要求2所述的一种基于物联网的多数据源联合查询系统,其特征在于:所述多数据源连接模块添加的数据源包括ORACLE/Mysql/Postgresl数据源,配置的信息包括数据库端口、连接地址、Schema、用户名和密码。
4.根据权利要求1所述的一种基于物联网的多数据源联合查询系统,其特征在于:所述查询日志分析单元包括查询日志模块、基本信息统计模块、资源使用情况模块、执行方案模块和步骤分解模块,其中,
所述查询日志模块用于显示日志列表;
所述基本信息统计模块用于收集基础日志信息;
所述资源使用情况模块用于收集资源日志相关统计信息;
所述执行方案模块用于显示节点的状态;
所述步骤分解模块用于显示步骤信息。
5.根据权利要求4所述的一种基于物联网的多数据源联合查询系统,其特征在于:所述基本信息统计模块收集的基础日志信息包括提交时间、地址、来源、资源分配、排队时间和执行实际。
6.根据权利要求4所述的一种基于物联网的多数据源联合查询系统,其特征在于:所述资源使用情况模块收集的统计信息包括CPU资源、调用资源、传输记录数、内存使用、内存池、并发和调度。
7.根据权利要求1所述的一种基于物联网的多数据源联合查询系统,其特征在于:所述查询监控单元包括综合统计概览模块、协调器监控汇总模块、协调器任务监控模块、集群节点状态模块和集群节点详情模块,其中,
所述综合统计概览模块用于统计指标;
所述协调器监控汇总模块用于执行任务监控统计汇总;
所述协调器任务监控模块用于显示执行任务监控详情;
所述集群节点状态模块用于显示节点运行状态;
所述集群节点详情模块用于显示基础运行信息。
8.根据权利要求7所述的一种基于物联网的多数据源联合查询系统,其特征在于:所述综合统计概览模块统计的指标包括活动协调器、执行的查询、活动节点和处理压力。
9.根据权利要求7所述的一种基于物联网的多数据源联合查询系统,其特征在于:所述集群节点状态模块显示的基础运行信息包括地址、启动时长、处理器、协调器、内存和CPU。
10.一种基于物联网的多数据源联合查询系统的查询方法,其特征在于,包括以下步骤:
S1、多数据源连接管理单元连接数据源并进行信息配置;
S2、中间件模块收到指令,对不同数据源进行连通;
S3、JDBC引擎模块从数据源获取数据来进行运算分析;
S4、数据计算模块接收到查询SQL后,动态解析为多个SubPlan,交给多个Worker节点并行计算;
S5、编译执行模块将执行计划进行动态编译,显示查询结果;
S6、查询日志分析单元记录日志信息,查询监控单元记录运行状态信息。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于南方电网数字电网研究院有限公司,未经南方电网数字电网研究院有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202111371664.5/1.html,转载请声明来源钻瓜专利网。