[发明专利]一种数据认知方法、装置、设备及存储介质

说明书

本申请实施例提供了一种数据认知方法、装置、设备及存储介质，涉及计算机技术领域，该方法包括：基于应用数据构建现实层子图，现实层子图包括多个应用实体，每个应用实体用于表征应用数据中一个应用数据单元。基于标准数据构建知识层子图，知识层子图包括多个标准实体，每个标准实体用于表征标准数据中一个标准数据单元。通过深度学习模型，确定现实层子图中的至少一个应用实体，分别在知识层子图中对应的标准实体；再将至少一个应用实体各自对应的标准实体的标准属性信息，分别添加至至少一个应用实体各自对应的属性信息集合中。相较于采用人工方法进行数据认知的方案来说，本申请的数据认知方法可以提高数据认知的准确性，提高数据认知的效率。

技术领域

本发明实施例涉及计算机技术领域，尤其涉及一种数据认知方法、装置、设备及存储介质。

背景技术

为了规范化数据形式，国家相关机构针对各行各业制定了数据标准。而企业存储的原始数据往往由于其本身的特点，导致数据形式、字段命名、数据质量等各不相同，因此需要对企业原始数据进行数据治理，为后续分析、挖掘提供高质量的数据，而数据治理的第一步是对数据进行认知，通过数据认知了解数据的主外键等基本信息，及数据字段对应标准数据的哪一字段等。

目前，相关技术在实现数据认知时，一般采用人工方法，即人工执行数据认知的过程。然而，人工方法具有主观性，并且费时费力，而需要进行数据认知数据繁多，从而导致数据认知的准确性和效率较低。

发明内容

本申请实施例提供了一种数据认知方法、装置、设备及存储介质，用于提高数据认知的效率。

一方面，本申请实施例提供了一种数据认知方法，该方法包括：

基于应用数据构建现实层子图，所述现实层子图包括多个应用实体，每个应用实体用于表征所述应用数据中一个应用数据单元，应用实体之间的连接关系用于表征应用数据单元之间的关联关系；

基于标准数据构建知识层子图，所述知识层子图包括多个标准实体，每个标准实体用于表征所述标准数据中一个标准数据单元，标准实体之间的连接关系用于表征标准数据单元之间的关联关系；

通过深度学习模型，确定所述现实层子图中的至少一个应用实体，分别在所述知识层子图中对应的标准实体；

将所述至少一个应用实体各自对应的标准实体的标准属性信息，分别添加至所述至少一个应用实体各自对应的属性信息集合中。

一方面，本申请实施例提供了一种数据认知装置，该装置包括：

第一图谱模块，用于基于应用数据构建现实层子图，所述现实层子图包括多个应用实体，每个应用实体用于表征所述应用数据中一个应用数据单元，应用实体之间的连接关系用于表征应用数据单元之间的关联关系；

第二图谱模块，用于基于标准数据构建知识层子图，所述知识层子图包括多个标准实体，每个标准实体用于表征所述标准数据中一个标准数据单元，标准实体之间的连接关系用于表征标准数据单元之间的关联关系；

匹配模块，用于通过深度学习模型，确定所述现实层子图中的至少一个应用实体，分别在所述知识层子图中对应的标准实体；

添加模块，用于将所述至少一个应用实体各自对应的标准实体的标准属性信息，分别添加至所述至少一个应用实体各自对应的属性信息集合中。

可选地，所述应用数据包括现实层表和现实层字段，所述应用实体包括现实层表实体和现实层字段实体，其中，每个现实层表实体用于表征一个现实层表，每个现实层字段实体用于表征一个现实层字段；

所述现实层表实体与所述现实层字段实体之间的连接关系用于表征一个现实层表对应一个或多个现实层字段。

可选地，所述标准数据包括数据项集，所述标准实体包括数据项集实体，每个数据项集实体用于表征一个数据项集；