[发明专利]数据查找模型建立方法、装置、计算机设备和存储介质

说明书

本申请涉及大数据技术领域，特别涉及一种数据查找模型建立方法、装置、计算机设备和存储介质。所述方法包括：获取数据集合；将数据集合进行两次数据划分并对划分的数据块筛选得到筛选时长；分析数据块与筛选时长得到对应逻辑，根据对应逻辑确定当前数据块的数据量；将数据集合划分得到当前数据块后进行筛选得到当前筛选时长，当前筛选时长与当前数据块符合对应逻辑时根据逻辑得到下一当前数据块的大小，并继续对当前数据块划分、筛选得到当前筛选时长，直至当前筛选时长与当前数据块不符合对应逻辑时，根据当前数据块的前一数据块大小建立数据查找模型。采用本方法建立数据查找模型，提高了数据查找的效率。

技术领域

本申请涉及大数据技术领域，特别是涉及一种数据查找模型建立方法、装置、计算机设备和存储介质。

背景技术

随着互联网技术的发展，互联网应用迅速扩大，数据量也正在爆发式增长。面对这些海量数据，用户常常会利用数据库、大数据平台等方法进行数据保存，后续在需要利用数据时避免数据丢失。

然而，因为数据量的巨大，目前在进行数据查找时，本身已经要消耗不少资源和时间，且在查找数据时，待查找数据的数据要求若发生变化，需要在数据库根据改变的数据要求重新查找，效率低下。

发明内容

基于此，有必要针对上述技术问题，提供一种能够提高数据查找效率的数据查找模型建立方法、装置、计算机设备和存储介质。

一种数据查找模型建立方法，所述方法包括：

获取初始数据集合；

将所述初始数据集合划分得到第一数据块，对所述第一数据块进行数据筛选得到第一筛选时长；

将所述初始数据集合划分得到第二数据块，对所述第二数据块进行数据筛选得到第二筛选时长；

根据所述第一筛选时长、所述第二筛选时长、所述第一数据块以及所述第二数据块得到筛选时长与数据块大小的第一对应逻辑，并根据所述第一对应逻辑确定当前数据块的数据量；

将所述初始数据集合划分得到当前数据块后进行数据筛选得到当前筛选时长，并判断所述当前筛选时长与所述当前数据块是否符合所述第一对应逻辑；

当所述当前筛选时长与所述当前数据块符合所述第一对应逻辑时，则根据所述第一对应逻辑得到下一数据块的大小作为当前数据块的大小，并继续将所述初始数据集合划分得到当前数据块后进行数据筛选得到当前筛选时长，直至所述当前筛选时长与所述当前数据块不符合所述第一对应逻辑时，将所述当前数据块的前一数据块大小作为模型数据块大小建立数据查找模型。

在其中一个实施例中，还包括：

当所述当前筛选时长与所述当前数据块不符合所述第一对应逻辑时，则获取所述第一筛选时长、第二筛选时长以及当前筛选时长中最短筛选时长对应的数据块；

通过所述最短筛选时长对应的数据块建立数据查找模型。

在其中一个实施例中，所述直至所述当前筛选时长与所述当前数据块不符合所述第一对应逻辑之后，还包括：

获取所述当前数据块的前一数据块，将所述初始数据集合划分得到所述当前数据块的前一数据块后进行数据筛选若干次，存储若干次的筛选时长；

所述通过所述当前数据块的前一数据块大小建立数据查找模型，包括：

计算所存储的筛选时长的平均时长；

获取历史筛选时长，判断所述平均时长是否小于所述历史筛选时长；

当所述平均时长小于所述历史筛选时长时，通过所述当前数据块的前一数据块大小建立数据查找模型。

在其中一个实施例中，所述计算所存储的筛选时长的平均时长之前，还包括：