[发明专利]数据索引方法及装置

说明书

本发明实施例提供一种数据索引方法及装置，通过二级索引数据库中包括至少一条位图索引记录，各位图索引记录中包括主属性的值和至少一个从属性的值，所述至少一个从属性的值按照比特位存储，使得二级索引数据库所需的存储空间大大降低；该方法根据至少一个查询属性，查询二级索引数据库，获取至少一条目标位图索引记录的主属性的值；根据各目标位图索引记录的主属性的值，查询一级索引数据库，获取各目标位图索引记录对应的至少一条原始数据记录；根据查询条件和至少一条原始数据记录，获取与查询条件对应的查询结果；通过上述数据索引过程，能够提高数据索引的效率和准确性，还可以提高数据索引的查询场景覆盖率。

技术领域

本发明实施例涉及数据处理技术领域，尤其涉及一种数据索引方法及装置。

背景技术

HBase(Hadoop database)是一个高性能、分布式的开源数据库，它不同于一般的关系型数据库，是一个适合于非结构化数据存储的数据库。HBASE是基于Rowkey(行键)的有序存储，在明确Rowkey的条件下HBASE支持毫秒级的快速检索。然而，随着HBASE的应用的不断深入，单纯通过Rowkey检索数据的方式不再满足应用的需求，因此，需要一种针对HBASE数据库的二级索引方法。

现有的HBASE二级索引方案中，根据常用的查询属性创建二级索引表，也就是说，每个二级索引表都是建立在固定的查询条件下的。因此，当查询条件为多条件时，需要按照多重查询属性依次检索不同的二级索引表，然后将从不同的二级索引表中获取的Rowkey再进行比对取重，得到符合所有查询条件的Rowkey，最后结合查询条件，根据筛选出的Rowkey进行信息提取，完成多重查询条件的查询。

然而，上述现有技术中，根据不同的条件或条件组合创建多个二级索引表，HBASE数据库中的Rowkey会重复保存在不同的二级索引表中，使得存储二级索引表需要较大的存储空间。

发明内容

本发明实施例提供一种数据索引方法及装置，能够降低二级索引数据库的存储空间。

第一方面，本发明实施例提供一种数据索引方法，包括：

根据查询条件，获取所述查询条件对应的至少一个查询属性；

根据所述至少一个查询属性，查询二级索引数据库，获取至少一条目标位图索引记录的主属性的值；其中，所述二级索引数据库中包括至少一条位图索引记录，各所述位图索引记录中包括主属性的值和至少一个从属性的值，所述至少一个从属性的值按照比特位存储；所述目标位图索引记录中与所述查询属性匹配的目标从属性的值为预设值，所述预设值用于指示一级索引数据库中与所述目标位图索引记录对应的原始数据记录中存在所述目标从属性；

根据各所述目标位图索引记录的主属性的值，查询所述一级索引数据库，获取各所述目标位图索引记录对应的至少一条原始数据记录；

根据所述查询条件和所述至少一条原始数据记录，获取与所述查询条件对应的查询结果。

可选的，所述根据所述至少一个查询属性，查询二级索引数据库，获取至少一条目标位图索引记录的主属性的值，包括：

根据所述至少一个查询属性和位图字典，查询二级索引数据库，获取至少一条目标位图索引记录的主属性的值；其中，所述位图字典中包括至少一个从属性，所述位图字典中的所述至少一个从属性与所述位图索引记录中的所述至少一个从属性的值按预设顺序依次对应。

可选的，所述根据所述至少一个查询属性和位图字典，查询二级索引数据库，获取至少一条目标位图索引记录的主属性的值，包括：

根据位图字典，获取各所述查询属性匹配的目标从属性，以及各所述目标从属性在所述位图字典中的位置；