[发明专利]数据处理方法、装置、设备及存储介质

权利要求书

1.一种数据处理方法，其特征在于，包括：

控制目标驻守线程从分片控制表中获取待处理的目标数据分片的分片编号；

控制所述目标驻守线程根据所述目标数据分片的分片编号，从快速访问表中获取对应的分片编号与所述目标数据分片的分片编号相同的多个目标数据；其中，所述目标数据分片包括所述多个目标数据，所述多个目标数据为数据库中相同热点字段对应的数据；

控制所述目标驻守线程依次处理多个所述目标数据。

2.根据权利要求1所述的方法，其特征在于，所述分片控制表还包括：锁标志；

所述控制目标驻守线程从分片控制表中获取待处理的目标数据分片的分片编号，包括：

控制所述目标驻守线程从所述分片控制表中获取第一数据分片的锁标志；

若所述第一数据分片的锁标志为释放状态，则控制所述目标驻守线程将所述第一数据分片确定为所述目标数据分片，将所述第一数据分片的分片编号确定为所述目标数据分片的分片编号。

3.根据权利要求2所述的方法，其特征在于，所述分片控制表还包括：令牌及执行开始时间；

所述控制所述目标驻守线程依次处理所述目标数据之后，所述方法还包括：

控制所述目标驻守线程将所述分片控制表中所述目标数据分片的锁标志修改为锁定状态；

控制所述目标驻守线程将所述分片控制表中所述目标数据分片的令牌更新为所述目标驻守线程的令牌；

在所述目标驻守线程开始依次处理所述目标数据后，控制所述目标驻守更新所述分片控制表中所述目标数据分片的执行开始时间。

4.根据权利要求3所述的方法，其特征在于，所述方法还包括：

若所述第一数据分片的锁标志为锁定状态，则确定所述第一数据分片的执行开始时间与当前时间的差值的绝对值是否大于预设时间阈值；

若确定所述第一数据分片的执行开始时间与当前时间的差值的绝对值大于所述预设时间阈值，则将所述第一数据分片确定为所述目标数据分片，将所述第一数据分片的分片编号确定为所述目标数据分片的分片编号；

控制所述目标驻守线程将所述分片控制表中所述目标数据分片的令牌更新为所述目标驻守线程的令牌；

在所述目标驻守线程开始依次处理所述目标数据后，控制所述目标驻守更新所述分片控制表中所述目标数据分片的执行开始时间；

控制所述目标驻守线程在依次处理所述目标数据的过程中，判断所述目标数据分片的令牌是否为所述目标驻守线程的令牌；

若所述目标数据分片的令牌不是所述目标驻守线程的令牌，则控制所述目标驻守线程停止处理所述目标数据。

5.根据权利要求1-4任一项所述的方法，其特征在于，所述方法还包括：

在控制所述目标驻守线程依次处理完成所述目标数据后，采用删除操作从所述快速访问表中删除所述多个目标数据；其中，所述删除操作为按照所述快速访问表中的主键单条进行删除的操作。

6.根据权利要求1-4任一项所述的方法，其特征在于，所述控制目标驻守线程从分片控制表中获取待处理的目标数据分片的分片编号之前，所述方法还包括：

接收发送设备发送的多个目标数据；

根据数据的标识与分片编号的映射关系以及所述目标数据的标识，确定所述目标数据的分片编号；

将所述目标数据存储在所述快速访问表中所述目标数据的分片编号对应的位置中。

7.根据权利要求6所述的方法，其特征在于，所述接收发送设备发送的多个目标数据，包括：

接收所述发送设备通过卡夫卡kafka中间件发送的多个所述目标数据；

采用增加操作将多个所述目标数据存储在流水表中，以便于根据所述流水表中的数据与已处理的数据进行比对；其中，所述增加操作为按照所述流水表的主键单条进行增加的操作。