[发明专利]数据流存储方法、装置以及计算机存储介质

权利要求书

1.一种数据流存储方法，其特征在于，包括：

获取数据流；

确定数据流中的数据的关键字；

根据所述数据的关键字将数据分配分区；

对各个分区内的数据进行存储。

2.根据权利要求1所述的数据流存储方法，其特征在于，所述获取数据流，包括：

通过Kafka获取多条数据组成的数据流。

3.根据权利要求1所述的数据流存储方法，其特征在于，所述确定数据流中的数据的关键字，包括：

使用Hash算法计算各条数据的关键字。

4.根据权利要求3所述的数据流存储方法，其特征在于，所述根据所述数据的关键字将数据分配分区，包括：

根据预设的分区的数量，使用Hash取模算法，通过所述数据的关键字计算所述数据对应的分区序号。

5.根据权利要求1所述的数据流存储方法，其特征在于，所述对各个分区内的数据进行存储，包括：

对各个分区内的数据进行序列化；

存储序列化后的数据。

6.根据权利要求1所述的数据流存储方法，其特征在于，所述对各个分区内的数据进行存储，包括：

对各个分区内的数据进行快照存储。

7.一种数据流存储装置，其特征在于，包括：

获取单元，用于获取数据流；

确定单元，用于确定数据流中的数据的关键字；

分配单元，用于根据所述数据的关键字将数据分配分区；

存储单元，用于对各个分区内的数据进行存储。

8.根据权利要求7所述的数据流存储装置，其特征在于，所述获取单元，还用于通过Kafka获取多条数据组成的数据流。

9.根据权利要求7所述的数据流存储装置，其特征在于，所述确定单元，还用于使用Hash算法计算各条数据的关键字。

10.根据权利要求9所述的数据流存储装置，其特征在于，所述分配单元，还用于根据预设的分区的数量，使用Hash取模算法，通过所述数据的关键字计算所述数据对应的分区序号。

11.根据权利要求7所述的数据流存储装置，其特征在于，所述存储单元，还用于对各个分区内的数据进行序列化；存储序列化后的数据。

12.根据权利要求7所述的数据流存储装置，其特征在于，所述存储单元，还用于对各个分区内的数据进行快照存储。

13.一种计算机可读存储介质，其上存储有计算机指令，所述计算机可读存储介质为非易失性存储介质或非瞬态存储介质，其特征在于，所述计算机指令运行时执行权利要求1～6任一项所述的数据流存储方法的步骤。

14.一种数据流存储装置，包括存储器和处理器，所述存储器上存储有计算机指令，其特征在于，所述计算机指令运行时所述处理器执行权利要求1～6任一项所述的数据流存储方法的步骤。