[发明专利]基于KV存储的索引生成方法、装置、设备及介质

权利要求书

1.一种基于KV存储的索引生成方法，其特征在于，所述方法包括：

获取待生成索引数据，所述待生成索引数据包括：多条目标业务数据、业务分类、业务标签；

根据所述待生成索引数据，确定业务类别数据；

获取预设的算法数据；

根据所有所述目标业务数据、所述业务分类、所述业务标签、所述业务类别数据及所述算法数据按KV生成规则建立倒排索引，得到待评估索引数据，所述待评估索引数据包括Key数据、Value数据；

对所述待评估索引数据进行有效预估及有效性处理，得到目标索引数据。

2.根据权利要求1所述的基于KV存储的索引生成方法，其特征在于，所述获取待生成索引数据的步骤，包括：

获取原始数据，所述原始数据中包括：多条原始业务数据；

根据所述原始业务数据进行分类及标签标注，得到所述目标业务数据、与所述目标业务数据对应的所述业务分类及所述业务标签。

3.根据权利要求1所述的基于KV存储的索引生成方法，其特征在于，所述根据所有所述目标业务数据、所述业务分类、所述业务标签、业务类别数据及算法数据按KV生成规则建立倒排索引，得到待评估索引数据的步骤，包括：

根据所述目标业务数据对应的所述业务标签、所述目标业务数据对应的所述业务分类、所述业务类别数据、所述算法数据按KV生成规则，得到所述Key数据；

根据所述目标业务数据，确定目标Value值；

根据所述Key数据在Redis中进行匹配，得到匹配结果；

当所述匹配结果为成功时，根据所述Key数据从所述Redis中取出所述Value数据，将所述目标Value值更新到所述Value数据中；

当所述匹配结果为失败时，将目标Value值作为所述Value数据；

将所述Key数据和所述Value数据存入所述Redis中，重复上述步骤直至所有所述目标业务数据完成生成所述Key数据及所述目标Value值，将所有所述Key数据、所有所述Value数据作为所述待评估索引数据。

4.根据权利要求1所述的基于KV存储的索引生成方法，其特征在于，所述对所述待评估索引数据进行有效预估及有效性处理，得到目标索引数据的步骤，包括：

对所述待评估索引数据的所述Value数据中的Value值进行数量统计，得到Value值数量；

当所述Value值数量位于预设阈值范围时将所述Value值数量对应的所述待评估索引数据作为所述目标索引数据，否则将所述Value值数量对应的所述待评估索引数据删除。

5.根据权利要求4所述的基于KV存储的索引生成方法，其特征在于，所述当所述Value值数量位于预设阈值范围时将所述Value值数量对应的所述待评估索引数据作为所述目标索引数据的步骤，包括：

当所述Value值数量位于预设阈值范围时将所述Value值数量对应的所述待评估索引数据，作为待压缩索引数据；

将所述待压缩索引数据压缩成PB格式，得到所述目标索引数据；

将所述目标索引数据存储在Redis中。

6.根据权利要求1所述的基于KV存储的索引生成方法，其特征在于，所述KV生成规则包括：Key生成规则、Value生成规则；

所述Key生成规则包括：按六个维度生成所述Key数据；

所述Value生成规则包括：按两个维度生成所述Value数据。

7.根据权利要求6所述的基于KV存储的索引生成方法，其特征在于，所述六个维度包括：业务标识、业务分类、业务标签、时间段、适用人群类别及算法标识；

所述两个维度包括：数据类别、数据标识。