[发明专利]数据校验方法、装置、设备及可读存储介质

权利要求书

1.一种数据校验方法，其特征在于，包括：

获取源数据表和目标数据表，确定所述源数据表的表格类型和所述目标数据表的表格类型；

若所述源数据表的表格类型和所述目标数据表的表格类型均为全量表格，则分别确定所述源数据表中的数据量和所述目标数据表中的数据量是否大于数据量阈值；

若所述源数据表中的数据量和所述目标数据表中的数据量均大于所述数据量阈值，则对所述源数据表进行分区处理，得到至少一个源分区表，以及对所述目标数据表进行分区处理，得到至少一个目标分区表；

基于所述至少一个源分区表中的源分区字段和所述至少一个目标分区表中的目标分区字段进行数据校验；

若任一源分区表中的源分区字段和对应的目标分区表中的目标分区字段之间的数据校验不通过，则确定所述源数据表与所述目标数据表不一致，所述对应的目标分区表为所述至少一个目标分区表中与所述任一源分区表对应的分区表。

2.根据权利要求1所述的方法，其特征在于，所述对所述源数据表进行分区处理，得到至少一个源分区表，包括：

基于所述源数据表中的数据量确定针对所述源数据表的等分划分规则，采用所述等分划分规则对所述源数据表进行划分，得到所述至少一个源分区表；或者，

基于所述源数据表中字段的字段类型确定针对所述源数据表的字段划分规则，采用所述字段划分规则对所述源数据表进行划分，得到所述至少一个源分区表，所述字段划分规则指示所述预设字段类型。

3.根据权利要求1所述的方法，其特征在于，所述数据校验包括字段校验和字段格式校验；

所述基于所述至少一个源分区表中的源分区字段和所述至少一个目标分区表中的目标分区字段进行数据校验，包括：

对所述源分区字段进行抽样，得到至少一个源抽样字段；

对所述目标分区字段进行抽样，得到至少一个目标抽样字段；

对所述至少一个源抽样字段和所述至少一个目标抽样字段进行字段校验；

若所述字段校验通过，则对所述至少一个源抽样字段的字段格式和所述至少一个目标抽样字段的字段格式进行字段格式校验；

若所述字段格式校验通过，则对所述至少一个源分区表中的剩余源分区字段和所述至少一个目标分区表中的剩余目标分区字段进行数据校验。

4.根据权利要求3所述的方法，其特征在于，所述若任一源分区表中的源分区字段和对应的目标分区表中的目标分区字段之间的数据校验不通过，则确定所述源数据表与所述目标数据表不一致，包括：

若任一源分区表中的源分区字段与对应的目标分区表中的目标分区字段均不匹配，则确定所述源数据表与所述目标数据表不一致；或者，

若所述至少一个源分区表中的每个源分区字段与所述至少一个目标分区表中的目标分区字段匹配，且所述至少一个源分区表中存在一个或多个源分区字段的字段格式与所述至少一个目标分区表中的目标分区字段格式均不匹配，则确定所述源数据表与所述目标数据表不一致。

5.根据权利要求1所述的方法，其特征在于，所述确定所述源数据表中的数据量和所述目标数据表中的数据量是否大于数据量阈值之后，所述方法还包括：

若所述源数据表中的数据量和所述目标数据表中的数据量均小于或等于所述数据量阈值，则对所述源数据表中的每个源字段与所述目标数据表中的每个目标字段进行字段校验；

若所述字段校验通过，则对所述源数据表中的每个源字段的字段格式与所述目标数据表中的每个目标字段的字段格式进行字段格式校验；

若所述源数据表中存在一个或多个源字段的字段格式与所述目标数据表中的目标字段的字段格式均不匹配，则确定所述源数据表与所述目标数据表不一致。