[发明专利]基于大数据的元数据模型管理系统和管理方法

摘要

本发明提供了一种基于大数据的元数据模型管理系统和管理方法，该管理方法包括以下步骤步骤一，判断大数据的数据源结构的类型；步骤二，对结构化数据源进行元数据抽取后，执行步骤四；步骤三，对非结构化数据源进行元数据抽取后，执行步骤四；步骤四，定义抽取后的元数据的关系，并形成与之对应的元数据模型，执行步骤五；步骤五，将形成的元数据模型以图形方式存储在数据库中，执行步骤六；步骤六，根据定义好的元数据模型，按照业务需求对元数据进行发布，以提供外部系统使用元数据。本发明实现管理不同类型的数据，能够在异构数据源之上构建统一的元数据体系，并提供对该体系的存储、管理和使用的功能。

主权项

一种基于大数据的元数据模型管理方法，其特征在于，其包括以下步骤：步骤一，判断大数据的数据源结构的类型，即判断是结构化数据源还是非结构化数据源，若是结构化数据源则执行步骤二，若是非结构化数据源则执行步骤三；步骤二，对结构化数据源进行元数据抽取后，执行步骤四；步骤三，对非结构化数据源进行元数据抽取后，执行步骤四；步骤四，定义抽取后的元数据的关系，并形成与之对应的元数据模型，执行步骤五；步骤五，将形成的元数据模型以图形方式存储在数据库中，执行步骤六；步骤六，根据定义好的元数据模型，按照业务需求对元数据进行发布，以提供外部系统使用元数据；所述结构化数据源包含关系数据库和文件形式，非结构化数据源包括NOSQL数据库；所述步骤二和步骤三通过手动提取用户自定义的元数据，并将元数据格式转换成符合JSON数据规范的格式；所述步骤五首先解析元数据模型的JSON数据格式，将此数据格式解析变成节点、节点关系的图形识别方式的数据格式，然后将节点、节点关系存储到图形数据库中。