[发明专利]一种数据管理方法、装置、电子设备和存储介质

说明书

本发明实施例公开了一种数据管理方法、装置、电子设备和存储介质。该方法包括：在元数据库中获取预先定义的字段对应的元数据，并将元数据存储至数据库元模型；从预先获取到的标准化文件中抽取预先定义的实体对应的标准数据项，将标准数据项存储至标准元模型；基于数据库元模型和标准化元模型确定元数据库和标准化文件之间的映射规则；按照映射规则对元数据库的数据和标准化文件的数据进行管理。本发明实施例的方法可以根据数据库元模型和标准化元模型自动生成元数据库和标准化文件之间的映射规则，进而通过该映射规则对业务数据进行快速、有效地数据质量管理。

技术领域

本发明实施例涉及智能问答领域，尤其涉及一种数据管理方法、装置、电子设备和存储介质。

背景技术

数据质量管理是对支持业务需求的数据进行全面的质量管理。通过人工制定和执行数据质量规则，检验数据的准确性、完整性、及时性、一致性和规范性，发现并解决数据质量问题。数据质量管理可以改善数据质量，提升业务价值。元数据是一种描述信息资源或数据等对象的数据，元数据的使用目的包括识别资源、评价资源、追踪资源在使用过程中的变化以及实现简单高效地管理大量网络化数据。元数据可以帮助数据仓库管理员和数据仓库的开发人员方便地找到其需要的数据，实现对信息资源的有效发现、查找和一体化组织。

现有的数据质量管理方法大都需要人工配置数据表之间的映射规则等。但是在实际项目中，数据表的数量庞大且关系复杂，人工配置经常会出现错误并且发生错误，自动化程度低，浪费人力资源的同时降低了数据质量管理的效率和准确率。

发明内容

本发明提供一种数据管理方法、装置、电子设备和存储介质，能够自动准确地生成数据表之间的映射规则，对数据进行快速、有效地数据质量管理。

第一方面，本发明实施例提供了一种数据管理方法，所述方法包括：

在元数据库中获取预先定义的字段对应的元数据，并将所述元数据存储至数据库元模型；

从预先获取到的标准化文件中抽取预先定义的实体对应的标准数据项，将所述标准数据项存储至标准元模型；

基于所述数据库元模型和所述标准化元模型确定所述元数据库和所述标准化文件之间的映射规则；

按照所述映射规则对所述元数据库的数据和所述标准化文件的数据进行管理。

第二方面，本发明实施例还提供了一种数据管理装置，所述装置包括：

第一存储模块，用于在元数据库中获取预先定义的字段对应的元数据，并将所述元数据存储至数据库元模型；

第二存储模块，用于从预先获取到的标准化文件中抽取预先定义的实体对应的标准数据项，将所述标准数据项存储至标准元模型；

确定模块，用于基于所述数据库元模型和所述标准化元模型确定所述元数据库和所述标准化文件之间的映射规则；

管理模块，用于按照所述映射规则对所述元数据库的数据和所述标准化文件的数据进行管理。

第三方面，本发明实施例还提供了一种电子设备，所述电子设备包括：

一个或多个处理器；

存储器，用于存储一个或多个程序；

当所述一个或多个程序被所述一个或多个处理器执行，使得所述一个或多个处理器实现如本发明任意实施例提供的数据管理方法。

第四方面，本发明实施例还提供了一种计算机可读存储介质，其上存储有计算机程序，该程序被处理器执行时实现如本发明任意实施例提供的数据管理方法。