[发明专利]一种数据检索方法、装置及系统

权利要求书

1.一种数据检索方法，其特征在于，包括：

获取Elasticsearch数据库中任一索引中的数据分片Shard的数量和位置；

在Doris数据库中创建与所述任一索引关联的任一表；其中，所述任一表中的数据分桶Tablet的数量和位置与所述任一索引中的Shard的数量和位置关联；

接收客户端发送的关联检索请求；其中，所述关联检索请求中携带第一检索条件；

根据所述第一检索条件对所述Elasticsearch数据库进行检索，确定存储有满足所述第一检索条件的数据的Shard以及所述满足所述第一检索条件的数据的行键Rowkey的集合；

根据第二检索条件对所述Doris数据库中与所述存储有满足所述第一检索条件的数据的Shard关联的Tablet进行检索，确定存储有满足所述第一检索条件的数据的Tablet；其中，所述第二检索条件为检索包括所述Rowkey的集合中任一Rowkey的数据。

2.如权利要求1所述的方法，其特征在于，所述Elasticsearch数据库用于存储支持全文检索的数据，所述Doris数据库用于存储不支持全文检索的数据。

3.如权利要求1所述的方法，其特征在于，在Doris数据库中创建与所述任一索引关联的任一表，包括：

获取所述任一表中需创建的Tablet的数量，确定所述需创建的Tablet的数量是否是所述任一索引中的Shard的数量的倍数；

若是，则对所述任一索引中的Shard和所述需创建的Tablet进行排序分组处理，得到一个Shard组和至少一个Tablet组；其中，所述Shard组中的Shard的数量与所述Tablet组中的Tablet的数量相同；

确定所述Tablet组中的任一Tablet的位置是所述Shard组中的任一Shard的位置，并在所述位置创建所述任一Tablet；其中，所述任一Tablet在所述Tablet组中的排序与所述任一Shard在所述Shard组中的排序相同。

4.如权利要求1-3任一所述的方法，其特征在于，接收客户端发送的关联检索请求之前，还包括：

根据待存储数据中的路由值，确定所述待存储数据在所述任一索引中对应的Shard和在所述任一表中对应的Tablet；其中，所述路由值为指示所述对应的Shard与所述对应的Tablet关联的值；

将所述待存储数据存储到所述对应的Shard和所述对应的Tablet。

5.如权利要求1所述的方法，其特征在于，根据所述第一检索条件对所述Elasticsearch数据库进行检索，包括：

根据所述第一检索条件同时对每个数据节点上的Shard进行滚动检索，并在所述满足所述第一检索条件的数据的数量不小于预设阈值时停止滚动检索。

6.如权利要求1或5所述的方法，其特征在于，根据第二检索条件对所述Doris数据库中与所述存储有满足所述第一检索条件的数据的Shard关联的Tablet进行检索，包括：

根据所述第二检索条件同时对每个数据节点上的与所述存储有满足所述第一检索条件的数据的Shard关联的Tablet进行滚动检索，并在所述满足所述第二检索条件的数据的数量不小于预设阈值时停止滚动检索。