[发明专利]数据质量评估方法、装置、终端设备以及存储介质

权利要求书

1.一种数据质量评估方法，其特征在于，所述方法包括以下步骤：

获取预设项目的待评估数据；

基于所述待评估数据的存储方式，确定所述待评估数据的评估级别；

利用所述评估级别和预设评分规则，对所述待评估数据进行评估，获得有效性分值、完整性分值和及时性分值；

基于所述有效性分值、所述完整性分值和所述及时性分值，获得所述待评估数据的评估结果；

基于所述评估结果，确定所述待评估数据的有效性。

2.如权利要求1所述的数据质量评估方法，其特征在于，基于所述待评估数据的存储方式，确定所述待评估数据的评估级别的步骤包括：

在所述待评估数据的存储方式为多表存储时，将所述待评估数据的评估级别确定为表粒度评估，或，

在所述待评估数据的存储方式为单表存储时，将所述待评估数据的评估级别确定为字段粒度评估。

3.如权利要求2所述的数据质量评估方法，其特征在于，所述利用所述评估级别和预设评分规则，对所述待评估数据进行评估，获得有效性分值、完整性分值和及时性分值的步骤包括：

基于所述评估级别，确定所述待评估数据的待评估对象；

利用所述预设评分规则，计算所述待评估对象的波动性分值和规范度分值，并基于所述波动性分值和所述规范度分值，获得所述有效性分值；

利用所述预设评分规则，计算所述待评估对象的非空率和缺失率，并基于所述非空率和所述缺失率，获得所述完整性分值；

利用所述预设评分规则，计算所述待评估对象的时间间隔分值，并基于所述时间间隔分值获得所述及时性分值。

4.如权利要求3所述的数据质量评估方法，其特征在于，所述利用所述预设评分规则，计算所述待评估对象的波动性分值和规范度分值，并基于所述波动性分值和所述规范度分值，获得所述有效性分值的步骤包括：

获取所述待评估对象的数据的预设阈值；

计算所述待评估对象的数据值与所述预设阈值的数据差值；

基于所述数据差值与所述预设阈值的比值，获得所述波动性分值；

确定所述待评估对象中满足预设规范的规范数据的数量；

基于所述规范数据的数量与所述待评估对象的数据总量的比值，获得所述规范度分值；

获取所述波动性分值的波动性权重和所述规范度分值的规范度权重；

基于所述波动性分值、所述规范度分值、所述波动性权重和所述规范度权重，利用公式一，获得所述有效性分值；

所述公式一为：

其中，Z₁为所述波动性分值，W_z1为所述波动性权重，Z₂为所述规范度分值，W_z1为所述规范度权重，Z为所述有效性分值。

5.如权利要求4所述的数据质量评估方法，其特征在于，所述利用所述预设评分规则，计算所述待评估对象的非空率和缺失率，并基于所述非空率和所述缺失率，获得所述完整性分值的步骤包括：

确定所述待评估对象中非空数据的数量和空数据的数量；

基于所述非空数据的数量与所述待评估对象的数据总量的比值，获得所述非空率；

基于所述空数据的数量与所述待评估对象的数据总量的比值，获得所述缺失率；

获取所述非空率的非空权重和所述缺失率的缺失权重；

基于所述非空率、所述缺失率、所述非空权重和所述缺失权重，利用公式二，获得所述完整性分值；

所述公式二为：

其中，C₁为所述非空率，W_c1为所述非空权重，C₂为所述缺失率，W_c2为所述缺失权重，C为所述完整性分值。