[发明专利]数据存储的方法及装置

说明书

本发明公开了一种数据存储的方法及装置，涉及数据处理领域。本发明主要解决了现有技术中由于数据存储混杂而导致数据的查询时间过长的问题。本发明的方法包括：确定满足查询条件的数据在原始数据表中的数据量，所述查询条件包含的维度个数小于所述原始数据表包含的维度个数；如所述数据量大于第一阈值，则根据所述查询条件建立子数据表，并将满足所述查询条件的数据导入所述子数据表，所述查询条件中包含的维度与所述子数据表中包含的维度相同；存储所述查询条件和所述子数据表的对应关系，以便在根据所述对应关系查找到所述子数据表后，从所述子数据表中查找满足所述查询条件的数据。本发明可广泛应用于查询数据信息。

技术领域

本发明涉及数据处理领域，特别是涉及一种数据存储的方法及装置。

背景技术

随着科技的发展和市场的需求，用户对产品的智能化和自动化要求越来越高，希望产品能够更高效地完成复杂的指令工作。在数据处理领域效率非常重要，所以这一需求尤为突出。但由于产品的不断更新，其携带的数据量会不断增多，进而拖长数据处理的时间，造成了工作效率的下降。

在现有技术中，产品携带的所有数据都会被记录在数据表中。发明人在实现上述技术的过程中发现：产品应用于不同功能的数据全部都记录在同一数据表中，实现各种功能的数据全部都混杂存储在一起。数据的这种无分类存储导致产品在启动某一功能时，会在数据表中查询到与该功能无关的数据，而且无关数据的数据量较大，耗费了大量查询时间。而且产品的使用时间越长，存储的数据量越大，查询到的无关数据就会越多，导致数据查询速度越来越慢、效率越来越低。

发明内容

有鉴于此，本发明提供的数据存储的方法及装置，主要目的在于解决现有技术中由于数据存储混杂而导致数据的查询时间过长的问题。

为了解决上述问题，本发明主要提供如下技术方案：

一方面，本发明提供了一种数据存储的方法，该方法包括：

确定满足查询条件的数据在原始数据表中的数据量，所述查询条件包含的维度个数小于所述原始数据表包含的维度个数；

如所述数据量大于第一阈值，则根据所述查询条件建立子数据表，并将满足所述查询条件的数据导入所述子数据表，所述查询条件中包含的维度与所述子数据表中包含的维度相同；

存储所述查询条件和所述子数据表的对应关系，以便在根据所述对应关系查找到所述子数据表后，从所述子数据表中查找满足所述查询条件的数据。

可选的，所述方法还包括：

若所述原始数据表中的数据存在缺失，则根据所述查询条件对应的业务特征，估计满足所述查询条件的数据在所述原始数据表中的数据量，以便基于估计的数据量与所述第一阈值进行比较；

和/或，若满足所述查询条件的数据未生成，则根据所述查询条件对应的业务特征，估计满足所述查询条件的数据在预设时间段后能够生成的数据量，以便基于估计的数据量与所述第一阈值进行比较。

可选的，在存储所述查询条件和所述子数据表的对应关系后，所述方法还包括：

实时监控所述子数据表中数据量的变化；

当所述子数据表中的数据量大于第二阈值时，根据预设拆分条件拆分所述子数据表；

更新所述查询条件和所述子数据表的对应关系。

可选的，所述方法还包括：

如所述数据量小于或者等于所述第一阈值，则建立公共表；

将满足查询条件的数据导入所述公共表中；

存储所述查询条件和所述公共表的对应关系。

可选的，存储所述查询条件和所述公共表的对应关系后，所述方法还包括：