[发明专利]数据重整方法、装置、设备和存储介质

说明书

本发明实施例公开了一种数据重整方法、装置、设备和存储介质，其中该方法包括：获取数据重整请求，数据重整请求中包括待重整的列存储表的标识；根据列存储表的标识获取对应的原始数据区、插入辅助表和操作辅助表；基于操作辅助表对原始数据执行对应的操作，将执行操作之后的原始数据写入重整数据区中；其中，原始数据包括原始数据区中的数据和插入辅助表中的数据。本发明实施例通过将列存储表中的数据和插入辅助表中的数据进行数据整理之后重新写入重整数据区中，实现了数据重整，使得数据重整之后的列存储表在进行数据查询时，其查询效率得到大幅提高。

技术领域

本发明实施例涉及计算机技术领域，尤其涉及一种数据重整方法、装置、设备和存储介质。

背景技术

传统的存储数据的方式是行存储，但是行存储的查询性能较低。为了提高数据查询性能，用列存储方式存储数据的方法应运而生。

列存储表的查询性能固然优于行存储表，但是其增删改性能低于行存储表。为了提高列存储表的增删改性能，可以使用辅助表的方法用于存储增删改的数据。辅助表虽然能提高列存储表的增删改性能，但是当辅助表中的数据较多时，反而会降低列存储表的查询性能。

发明内容

本发明实施例提供了一种数据重整方法、装置、设备和存储介质，可以解决现有技术中采用辅助表的列存储表的查询性能低的技术问题。

第一方面，本发明实施例提供了一种数据重整方法，包括：

获取数据重整请求，所述数据重整请求中包括待重整的列存储表的标识；

根据所述列存储表的标识获取对应的原始数据区、插入辅助表和操作辅助表；

基于所述操作辅助表对原始数据执行对应的操作，将执行操作之后的所述原始数据写入重整数据区中；

其中，所述原始数据包括所述原始数据区中的数据和所述插入辅助表中的数据。

进一步的，所述原始数据区的数量为至少一个，基于所述操作辅助表对原始数据执行对应的操作之前，还包括：

分别确定各所述原始数据区是否满足预设的数据重整条件，若是，则执行所述基于所述操作辅助表对原始数据执行对应的操作，其中所述数据重整条件为该原始数据区存在数据更新或者数据删除。

进一步的，所述操作辅助表包括删除辅助表和更新辅助表。

进一步的，基于所述操作辅助表对原始数据执行对应的操作，包括：

根据所述删除辅助表中的删除数据对所述原始数据进行删除，得到有效数据，所述删除数据包括删除行的行号；

根据所述更新辅助表中的更新数据对所述有效数据进行更新，所述更新数据包括更新值和更新位置。

进一步的，基于所述操作辅助表对原始数据执行对应的操作之前，还包括：获取原始数据，

所述获取原始数据，包括：

基于预设的列存储辅助表获取所述原始数据区中的数据，作为第一原始数据；

获取所述插入辅助表中的数据，作为第二原始数据。

进一步的，所述重整数据区包括所述原始数据区和新增数据区，

将执行操作之后的所述原始数据写入重整数据区中，包括：

将执行删除和更新操作之后的所述第一原始数据写入所述原始数据区中；

将执行删除和更新操作之后的所述第二原始数据写入所述新增数据区中。

进一步的，将执行操作之后的所述原始数据写入重整数据区中之后，还包括：