[发明专利]数据库系统、数据处理方法、装置及计算机存储介质在审
申请号: | 201910759858.9 | 申请日: | 2019-08-16 |
公开(公告)号: | CN112395306A | 公开(公告)日: | 2021-02-23 |
发明(设计)人: | 秦川 | 申请(专利权)人: | 阿里巴巴集团控股有限公司 |
主分类号: | G06F16/2453 | 分类号: | G06F16/2453;G06F16/2458;G06F16/27 |
代理公司: | 北京合智同创知识产权代理有限公司 11545 | 代理人: | 李杰;赵海娇 |
地址: | 英属开曼群岛大开*** | 国省代码: | 暂无信息 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 数据库 系统 数据处理 方法 装置 计算机 存储 介质 | ||
1.一种数据库系统,其特征在于,包括数据库集群和计算服务集群;
所述数据库集群包括分布式SQL引擎和存储数据源的数据库节点,所述分布式SQL引擎用于接收第一数据分析请求,其中,所述第一数据分析请求包括对所述数据库集群中的数据源进行数据分析的请求;将所述第一数据分析请求转换为可由所述计算服务集群执行的第二数据分析请求,以使所述计算服务集群直接对所述数据库集群的数据源执行所述第二数据分析请求所请求的操作。
2.根据权利要求1所述的系统,其特征在于,所述分布式SQL引擎用于:
根据所述第一数据分析请求生成逻辑执行计划;
将所述逻辑执行计划转换为所述计算服务集群可执行的多个分布式执行计划,以使所述计算服务集群通过执行所述多个分布式执行计划,从所述数据库集群的数据源获得所述第二数据分析所请求的数据,并执行所述第二数据分析请求所请求的操作。
3.根据权利要求2所述的系统,其特征在于,所述分布式SQL引擎,还用于:
根据所述逻辑执行计划生成基于所述数据库集群物理层的物理层执行计划,所述物理层执行计划中包括物理层的待执行目标分表;
将所述物理层执行计划转换为所述计算服务集群可执行的多个物理层分布式执行计划。
4.根据权利要求3所述的系统,其特征在于,所述分布式SQL引擎,还用于:
根据所述物理层执行计划确定对应的第一待执行操作和/或与所述第一待执行操作对应的目标分表;
对应确定与所述第一待执行操作对应的所述计算服务集群可执行的第二待执行操作,和/或,确定所述计算服务集群的数据集的分区中与所述目标分表对应的目标分区;
根据所述第二待执行操作和/或所述目标分区,生成所述多个物理层分布式执行计划。
5.根据权利要求4所述的系统,其特征在于,所述分布式SQL引擎用于根据表关联关系和所述目标分表确定所述目标分区,其中,所述表关联关系指示所述数据库集群中的各分表与所述计算服务集群的数据集中各分区的映射关系。
6.根据权利要求4所述的系统,其特征在于,所述分布式SQL引擎,用于确定所述第一执行操作对应的第一执行函数,根据所述计算服务集群中与所述第一执行函数对应的第二执行函数,生成所述第二执行操作。
7.根据权利要求2所述的系统,其特征在于,所述数据库集群包括数据一致的主数据库和备用数据库;
所述分布式SQL引擎还用于根据所述主数据库的负载信息和所述备用数据库的负载信息,将所述第一数据分析请求生成为包含访问所述主数据库或访问所述备用数据库的信息的逻辑执行计划。
8.根据权利要求2所述的系统,其特征在于,所述计算服务集群,用于:
从所述数据库集群的多个分库中,获取所述多个分布式执行计划所需的数据,并生成分布式弹性数据集;
通过对所述分布式弹性数据集执行所述多个分布式执行计划,以执行所述第二数据分析请求所请求的操作,获得请求结果并反馈至所述分布式SQL引擎。
9.一种数据处理方法,其特征在于,所述方法用于权利要求1-8中任一项所述的数据库系统,所述方法包括:
接收第一数据分析请求,其中,所述第一数据分析请求用于请求对所述数据库集群中的数据源进行数据分析;
将所述第一数据分析请求转换为可由所述数据库系统的计算服务集群执行的第二数据分析请求,以使所述计算服务集群对所述数据库集群的数据源执行所述第二数据分析请求所请求的操作计算服务集群。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于阿里巴巴集团控股有限公司,未经阿里巴巴集团控股有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910759858.9/1.html,转载请声明来源钻瓜专利网。
- 上一篇:设备唤醒方法、装置及系统
- 下一篇:掩模板及曝光方法