[发明专利]一种基于redis的高效Hbase分页查询方法

权利要求书

1.一种基于redis的高效Hbase分页查询方法，其特征在于，其包括如下步骤：

Step1，对Hbase表的数据生成Rowkey；

Step2，设置扫描数据的最大条数；

Step3，根据所查询的页码和每页的数据行数以及其他查询条件，生成查询范围startRow、endRow，以及pagefilter；

Step4，根据查询条件生成redis中用于存储Rowkey信息的key；

Step5，根据查询条件从Hbase中scan,并将扫描出来的当前页、前两页和后两页第一条数据的rowKey信息保存到redis中,具体步骤如下：

1)根据查询条件判断当前页Rowkey信息在redis中是否存在；

2)根据查询条件判断当前页的前两页以及后两页Rowkey信息在redis中是否存在；

3)如果当前页Rowkey信息在redis中存在，以该Rowkey作为startRow,设置数据总数total初始值为(pageIndex-1)*pageSize；

4)根据设置的条件对Hbase表进行scan遍历，每读取一条数据total+1，当scan出来的result为空或者total值为扫描最大条数的倍数时停止遍历，遍历过程中判断当前页n，当前页前两页n-1、n-2，当前页后两页n+1、n+2Rowkey信息在redis中是否存在，如果不存在则写入redis中，并返回计算出的数据总数total；

5)从redis中取出当前页的Rowkey信息作为startRow，加上之前的endRow和pageSize生成pageFilter到Hbase中取出指定页码和条数的数据；

Step6，取数据的时候直接从redis中查找。

2.根据权利要求1所述的一种基于redis的高效Hbase分页查询方法，其特征在于，所述Step1中的Hbase表中数据根据Rowkey的字典顺序排序，具体排序方法为：将数据Rowkey中的时间使用一个数字常量减去数据实际时间进行存储，即：Tm-Tc，其中，Tm为常量Long.MAX,Tc为数据实际时间。

3.根据权利要求1所述的一种基于redis的高效Hbase分页查询方法，其特征在于，所述Step3中获取指定页码的startRow存储在redis中的key,所述key的存储规则为：项目名称+域名称+方法名称+查询参数。