[发明专利]敏感数据采集方法、装置及数据处理设备

权利要求书

1.一种敏感数据采集方法，应用于一数据处理设备，其特征在于，所述数据处理设备执行的主线程下包括至少两个异步子任务；所述方法包括：

将全部数据库表均匀划分为至少两个子集合，并将所述子集合发送到各个所述异步子任务中；所述子集合中包括至少两个所述数据库表；

所述异步子任务对所述子集合中的敏感数据进行采集，获得采集结果；

待所有所述异步子任务采集完对应的子集合中的所述数据库表后，所述主线程汇聚所述异步子任务的采集结果，输出敏感数据信息。

2.根据权利要求1所述的方法，其特征在于，所述异步子任务对所述子集合中的敏感数据进行采集，获得采集结果的步骤，包括：

所述异步子任务对所述子集合中的数据库表的表名称、表结构进行采集；

判断表结构临时库中是否存在所述表结构对应的数据库表；所述表结构临时库用于临时存储被采集的所述数据库表；

若否，则将所述数据库表存入所述表结构临时库，并采集所述数据库表的表数据，获得采集结果；若是，则对所述子集合中的下一个数据库表进行所述表名称及所述表结构的采集。

3.根据权利要求2所述的方法，其特征在于，采集所述数据库表的表数据，获得采集结果的步骤，包括：

从所述数据库表中随机抽取第一预定数量的表数据作为所述采集结果。

4.根据权利要求1所述的方法，其特征在于，将数据库表均匀划分为至少两个子集合的步骤，包括：

获取数据库表的总数量和异步子任务的第一数量；

将所述数据库表均匀拆分成所述第一数量个所述子集合。

5.根据权利要求1所述的方法，其特征在于，

所述数据处理设备与目标数据库采用第二预定数量的数据源连接；所述目标数据库用于存储数据库表。

6.一种敏感数据采集装置，应用于一数据处理设备，其特征在于，所述数据处理设备执行的主线程下包括至少两个异步子任务；所述敏感数据采集装置包括：

处理模块，用于将全部数据库表均匀划分为至少两个子集合，并将所述子集合发送到各个所述异步子任务中；所述子集合中包括至少两个所述数据库表；

以及还用于执行所述异步子任务对所述子集合中的敏感数据进行采集，获得采集结果；

以及还用于待所有所述异步子任务采集完对应的子集合中的所述数据库表后，执行所述主线程汇聚所述异步子任务的采集结果，输出敏感数据信息。

7.根据权利要求6所述的装置，其特征在于，还包括判断模块；

所述处理模块，还用于执行所述异步子任务对所述子集合中的数据库表的表名称、表结构进行采集；

所述判断模块，用于判断表结构临时库中是否存在所述表结构对应的数据库表；所述表结构临时库用于临时存储被采集的所述数据库表；

若否，则将所述数据库表存入所述表结构临时库，并采集所述数据库表的表数据，获得采集结果；若是，则对所述子集合中的下一个数据库表进行所述表名称及所述表结构的采集。

8.根据权利要求7所述的装置，其特征在于，

所述处理模块，还用于从所述数据库表中随机抽取第一预定数量的表数据作为所述采集结果。

9.根据权利要求6所述的装置，其特征在于，所述处理模块将数据库表均匀划分为至少两个子集合的方式，包括：

获取数据库表的总数量和异步子任务的第一数量；

将所述数据库表均匀拆分成所述第一数量个所述子集合。

10.一种数据处理设备，其特征在于，包括处理器和存储器，所述存储器存储有能够被所述处理器执行的机器可执行指令，所述处理器可执行所述机器可执行指令以实现权利要求1-5任一所述的敏感数据采集方法。