[发明专利]一种分块缓存数据的方法、装置及存储介质

权利要求书

1.一种分块缓存数据的方法，所述方法包括：

接收计算任务的缓存数据请求，其中所述计算任务包括多个可并发执行的计算单元；

确定所述计算任务所需要的目标数据及所述目标数据所包括的多个数据分块，其中所述多个数据分块中的每一数据分块用于所述多个计算单元中至少一个计算单元的计算；

缓存所述多个数据分块中的一个数据分块，在确认相应数据分块对应的计算单元得以执行并得到计算结果后，缓存下一个数据分块，直至所述多个数据分块中的每一个数据分块都被缓存过。

2.根据权利要求1所述的方法，在确定所述计算任务所需要的目标数据及所述目标数据所包括的多个数据分块之前，所述方法还包括：

配置所述目标数据所包括的数据分块的数目；

根据数据分块的数目，将所述目标数据划分为相互独立的多个数据分块。

3.根据权利要求1所述的方法，在所述缓存所述多个数据分块中的一个数据分块之前，所述方法还包括：

判断所述目标数据的所有数据分块是否都可以被缓存，若否，则继续后面的操作。

4.根据权利要求1所述的方法，所述缓存所述多个数据分块中的一个数据分块之前，所述方法还包括：

获取所述多个数据分块中每个数据分块的标识并对所述多个数据分块的所有标识进行排序得到一个有序队列；

相应地，缓存所述多个数据分块中的一个数据分块，包括：

从所述有序队列中取出一个数据分块的标识，并缓存与相应标识对应的数据分块。

5.根据权利要求1所述的方法，所述确认相应数据分块对应的计算单元得以执行并得到计算结果，包括：

在并发执行所述计算单元的过程中，获取相应数据分块的引用数，其中所述引用数为相应数据分块被所有计算单元使用的次数；

当所述相应数据分块的引用数为0时，则确认相应数据分块对应的计算单元得以执行并得到计算结果。

6.根据权利要求5所述的方法，在所述获取相应数据分块的引用数之前，所述方法还包括：

对所述计算任务的每一计算单元进行分析以获取每一计算单元对所述目标数据的使用次数；

累计每一计算单元对相应数据分块的使用次数得到所述目标数据的引用数；

获取所述目标数据所包括的多个数据分块中每一数据分块的标识；

通过所述每一数据分块的标识，将所述目标数据的引用数记录为相应数据分块的引用数。

7.根据权利要求5所述的方法，在并发执行所述计算单元的过程中，所述方法还包括：

若所述计算单元使用了缓存得相应数据分块，则使所述相应数据分块的引用数减1。

8.根据权利要求1所述的方法，在所述缓存下一个数据分块之前，所述方法还包括：

从缓存中清除相应数据分块。

9.一种分块缓存数据的装置，所述装置包括：

缓存数据请求接收模块，接收计算任务的缓存数据请求，其中所述计算任务包括多个可并发执行的计算单元；

目标数据及数据分块确定模块，用于确定所述计算任务所需要的目标数据及所述目标数据所包括的多个数据分块，其中所述多个数据分块中的每一数据分块用于所述多个计算单元中至少一个计算单元的计算；

数据分块缓存模块，用于缓存所述多个数据分块中的一个数据分块，在确认相应数据分块对应的计算单元得以执行并得到计算结果后，清除当前的数据分块，缓存下一个数据分块，直至所述多个数据分块中的每一个数据分块都被缓存过。

10.一种计算机存储介质，在所述计算存储介质上存储了程序指令，其中，所述程序指令在运行时用于执行如权利要求1至8任一项所述的分块缓存数据的方法。