[发明专利]一种分布式NewSQL数据库系统

说明书

本发明公开了一种分布式NewSQL数据库系统，包括：JDBC/ODBC接口单元，用于接收用户向Master单元发送的用户请求，并将所述Master单元返回的结果以返回用户；Master单元，用于以JDBC/ODBC接口单元接入用户请求并且协调多个处理器之间的数据通讯以及管理整体流程，并将所述用户请求优先发送给SQLPlaner单元；SQLPlaner单元，用于解析所述用户请求，根据所述用户请求编译以及定制执行计划；Worker单元，用于并行地执行所述计划，以获得数据进行归并汇总以返回给Master单元。本发明支持标准JDBC接口，简化ETL过程，降低成本。

技术领域

本发明涉及大数据技术领域，尤其涉及一种分布式NewSQL数据库系统。

背景技术

目前HBase是Hadoop生态体系中最著名的分布式NoSQL数据库之一。其设计理念来源于Google的Bigtable。HBase仅提供了Java Api的访问接口，其封装了大量的数据操作接口。但其操作模式和方法是Hbase特有的Api模式。与人们习惯的JDBC/ODBC方式完全不同。随着越来越多的应用尝试迁移到HBase上，HBase的缺陷也越来越被暴露出来：用户需要通过API编程访问HBase，对于复杂应用的使用成本过高，直接导致许多较为复杂的应用无法使用HBase。

发明内容

本发明实施例的目的是提供一种分布式NewSQL数据库，支持标准JDBC接口，简化ETL过程，降低成本。

为实现上述目的，本发明实施例提供了一种分布式NewSQL数据库系统，包括：

JDBC/ODBC接口单元，用于接收用户向Master单元发送的用户请求，并将所述Master单元返回的结果以返回用户；

Master单元，用于以JDBC/ODBC接口单元接入用户请求并且协调多个处理器之间的数据通讯以及管理整体流程，并将所述用户请求优先发送给SQLPlaner单元；

SQLPlaner单元，用于解析所述用户请求，根据所述用户请求编译以及定制执行计划；

Worker单元，用于并行地执行所述计划，以获得数据进行归并汇总以返回给Master单元。

进一步的，还包括：分布式事务管理单元，用于协调所述计划中所设计的多方完成分布式事务管理。

进一步的，还包括：hbase单元和SOLR单元，均用于储存数据；

所述Worker单元进一步用于通过所述hbase单元和所述SOLR单元获取数据。

进一步的，还包括：监视器，所述监视器用于负责元数据管理以及用于监控所述hbase单元的Region的负载，避免特定的region负载过高，以及利用所述hbase单元的Coprocessor模块重新分配Region；

所述监视器与所述Master单元连接。

进一步的，所述解析所述用户请求，根据所述用户请求编译以及定制执行计划具体包括：

判断共享缓存池中是否存在与SQL语句相对应的预存SQL语句，若是，则输出与所述SQL语句对应的执行计划，若否，则

对所述SQL语句进行语法检查，若语法错误返回错误信息给用户，否则，

对所述SQL语句进行语义检查，若语义错误返回错误信息给用户，否则，

对所述SQL语句进行视图以及表达式转换，获得对应的转化结果；

根据所述转换结果选择优化器，获得对应的优化器选择结果；

根据所述优化器选择结果选择对应的数据连接方式以及连接顺序；