[发明专利]一种数据修正方法及装置

说明书

本申请提供了一种数据修正方法及装置，应用于数据治理系统，包括：获取目标数据源的业务数据；对所述业务数据进行数据检测，得到所述业务数据中的问题数据；根据目标数据源对应的行业数据标准，为所述问题数据匹配对应的修正规则；依据所述问题数据对应的修正规则对业务数据中问题数据进行修正，得到修正后的标准数据.本申请实施例所提出的数据治理方法通过有针对性地以目标数据源所属行业的行业数据标准来进行数据治理，实现了数据高效的智能标准化处理，提高了数据治理的准确度。

技术领域

本申请涉及数据处理领域，具体而言，涉及一种数据修正方法及装置。

背景技术

数据治理是组织中涉及数据使用的一整套管理行为。由企业数据治理部门发起并推行，关于如何制定和实施针对整个企业内部数据的商业应用和技术管理的一系列政策和流程。数据治理的最终目标是提升数据的价值，数据治理非常必要，是企业实现数字战略的基础，它是一个管理体系，包括组织、制度、流程和工具。

目前大部分企业使用第三方平台的服务来进行数据治理的工作，现有技术中第三方的数据治理是通过统一的数据标准对各类数据源的业务数据进行数据处理，使得数据符合数据标准的基本语义和业务规则，物理定义符合技术规范，但由于数据标准是通用的，导致数据治理得到的修正后的数据往往存在部分数据不符合数据源所属的行业数据标准。

发明内容

有鉴于此，本申请的目的在于提供一种数据修正方法及装置，用于解决现有技术中数据治理的准确度低的问题。

第一方面，本申请实施例提供了一种数据修正方法，应用于数据治理系统，该方法包括：

获取目标数据源的业务数据；

对所述业务数据进行数据检测，得到所述业务数据中的问题数据；

根据目标数据源对应的行业数据标准，为所述问题数据匹配对应的修正规则；

依据所述问题数据对应的修正规则对业务数据中问题数据进行修正，得到修正后的标准数据。

根据第一方面，本申请实施例提供了第一方面的第一种可能的实施方案，其中，在所述根据目标数据源对应的行业数据标准，为所述问题数据匹配对应的修正规则之前，还包括：

根据所述目标数据源对应的行业领域，从历史数据库获取所述行业领域的历史业务数据；

根据所述历史业务数据中各类别中使用频次最高的数据格式，确定所述目标数据源对应的行业数据标准。

根据第一方面，本申请实施例提供了第一方面的第二种可能的实施方案，其中，根据目标数据源对应的行业数据标准，为所述问题数据匹配对应的修正规则，包括：

根据目标数据源对应的行业数据标准，匹配所述问题数据对应的参考处理规则；

将所述问题数据及对应的参考处理规则发送给管理端，以使管理端返回针对所述参考处理规则进行修订后的修正规则。

根据第一方面，本申请实施例提供了第一方面的第三种可能的实施方案，其中，在依据所述问题数据对应的修正规则对业务数据中问题数据进行修正，得到修正后的标准数据之后，还包括：

根据所述修正后的标准数据，更新目标数据源对应的行业数据标准。

根据第一方面，本申请实施例提供了第一方面的第四种可能的实施方案，其中，还包括：

通过显示设备同步展示针对目标数据源的数据修正状态和修正过程中生成的反馈报告；所述反馈报告包括以下的任意一种或多种：数据概况统计报告、数据质量报告、问题数据报告和对比分析报告。

根据第一方面，本申请实施例提供了第一方面的第五种可能的实施方案，其中，所述目标数据源包括以下的任意一种或多种：日志服务器和业务服务器。