[发明专利]一种分布式NewSQL数据库系统和数据储存方法

说明书

本发明公开了一种分布式NewSQL数据库系统，包括：控制单元，用于以数据库接口的方式接入用户请求，并将所述用户请求发送给计划单元；其中，所述用户请求包括需要写入的数据字段；计划单元，用于解析所述用户请求，编译以及生成对应的执行计划；执行单元，用于根据执行计划，将所述用户请求的所述数据字段写入数据表；Hbase单元，用于储存所述数据表和索引表，所述Hbase单元还包括协同处理模块，用于在所述数据字段写入数据表时，将所述数据字段生成倒排索引形式的索引数据，并将所述索引数据写入到索引表。本发明还公开了基于上述分布式NewSQL数据库系统的数据储存方法。本发明能有效支持建立二级索引，从而高效解决非主键查询需求。

技术领域

本发明涉及大数据技术领域，尤其涉及一种分布式NewSQL数据库系统和数据储存方法。

背景技术

目前Hbase是Hadoop生态体系中最著名的分布式NoSQL数据库之一。其设计理念来源于Google的Bigtable。Hbase主要组件包括HMaster和HRegionsever，为用户提供表格类型的数据模型，按主键范围划分为多个region，HMaster负责管理和分配region，HRegionserver负责region数据的读写。但随着越来越多的应用尝试迁移到Hbase上，现有的Hbase的缺陷也越来越被暴露出来：在实际应用中，用户往往需要进行多维度的查询，现有的Hbase无法有效的支持非主键查询。

发明内容

本发明实施例的目的是提供一种分布式NewSQL数据库系统和数据储存方法，能有效支持建立二级索引，从而高效解决非主键查询需求。

为实现上述目的，本发明实施例提供了一种分布式NewSQL数据库系统，包括：

控制单元，用于以数据库接口的方式接入用户请求，并将所述用户请求发送给计划单元；其中，所述用户请求包括需要写入的数据字段；

计划单元，用于解析所述用户请求，编译以及生成对应的执行计划；

执行单元，用于根据执行计划，将所述用户请求的所述数据字段写入数据表；

Hbase单元，用于储存所述数据表和所述索引表，所述Hbase单元还包括协同处理模块，用于在所述数据字段写入数据表时，将所述待写入的数据字段生成倒排索引形式的索引数据，并将所述索引数据写入到索引表。

与现有技术相比，本发明公开的一种分布式NewSQL数据库系统，通过控制单元以数据库接口的方式接入用户请求，并将用户请求发送给计划单元；通过计划单元解析用户请求，编译以及生成对应的执行计划；通过执行单元根据执行计划，将用户请求的数据字段写入Hbase单元中的数据表；同时，通过Hbase单元的协同处理模块将待写入的数据字段生成倒排索引形式的索引数据，并将索引数据写入到索引表的技术方案，解决了现有技术中hbase无法支持非主键查询的问题，获得了允许用户根据具体的业务逻辑灵活的建立二级索引，满足在实际应用中用户的多维查询需求的有益效果。

进一步的，所述执行单元用于将所述Hbase单元的处理结果返回至所述控制单元；所述控制单元还用于将所述处理结果返回用户。

进一步的，还包括：分布式事务管理器，用于当所述执行计划中涉及事务时,协调所述执行计划中的多方完成分布式事务管理。

进一步的，所述Hbase单元还包括过滤模块，所述过滤模块和协同处理模块，用于生成针对数据的所述索引表。

进一步的，所述数据库接口为JDBC或ODBC。

本发明实施例还提供一种数据储存方法，基于上述所述的分布式NewSQL数据库系统，包括：

通过控制单元以数据库接口的方式接入用户请求，并将所述用户请求发送给计划单元；其中，所述用户请求包括需要写入的数据字段；