[发明专利]大数据环境下基于多方式结合实现数据编码优化管理的系统及方法

说明书

本发明涉及一种大数据环境下基于多方式结合实现数据编码优化管理的系统，包括资产编码定义模块，用于根据管理对象进行编码定义，维护基础标准体系来满足当前场景需求；编码管理模块，用于根据实际需求对已有的编码规范进行操作管理，绑定数据模型字段；编码组合模块；数据校验模块；数据输出模块，用于将经过处理的业务数据进行整理输出。本发明还涉及一种实现大数据环境下基于多方式结合的数据编码优化管理的方法。采用了该系统和方法，本发明通过设计多种编码方式结合的编码管理方式来解决目前数据资产管理当中遇到的复杂的数据管理需求，达到灵活、高效和充分使用数据的目的，提高数据资产管理系统的管理效率和数据价值。

技术领域

本发明涉及数据资产管理领域，尤其涉及资产编码优化管理领域，具体是指一种大数据环境下基于多方式结合实现数据编码优化管理的系统及方法。

背景技术

互联网的快速发展使数据呈爆炸式增长，电信、政府、金融、房产等领域产生大量的数据。在数据领域，像hive、hbase等这些炙手可热的组件或者是一些高级算法都是在数据有效治理和使用的基础上才能发挥作用。

数据资产管理是将数据规划整理后提供出去的一种管理方式，包括整个数据的流程和走向，通过有效的管理实现数据价值。其中，数据编码是数据资产管理的一个重要组成部分，数据编码方法的好坏直接影响数据提取、可否满足业务场景、能否准确使用数据等方面，一定程度影响着数据资产管理的效率。

目前，针对数据资产管理中，现有技术的数据的编码方法是根据实际数据描述对象的特点，将其分类并且对其进行数字编码来进行管理，具体的步骤如下：

1)根据管理对象进行梳理、分类、定义规则、设置对应编码；

2)根据步骤1)中的定义规则判断描述信息是否正确，如果不正确则提示错误信息，直到完全正确后进入步骤3)，如果正确，则直接进入步骤3)；

3)结合步骤1)和步骤2)反馈的结果，提取符合条件的数据信息；

4)根据3)中的数据结果，与系统信息进行比对；

5)根据4)中比对结果，将数据整理输出。

根据以上步骤创建出的编码、描述和数据之间的关系是有效的，适合处理一些简单的需求，但是对于特殊的编码定义、多种方式的编码管理不能满足，在使用上也会有诸多不便。

现有的数据资产管理中，编码管理是通过标准编码的分发和控制，规范和统一编码标准，实现系统数据同步管理，并进行对应和匹配，为系统数据集成提供基础标准编码支撑。形成适应企业信息技术应用特色的基础编码标准体系，为实现数字化提供基础平台支撑。目前的这种编码方式能够满足普通、单一的数据资产编码管理，如果需要面对复杂、多方式的数据资产编码管理需求，比如说是特征、流水、时间、日期及多种编码方式相组合的场景等该编码管理方式是无法满足需求的，针对该问题，通过设计特征码、流水码、时间码、日期码及多种编码相结合多方式的编码管理方式，来维护一套基础标准体系来满足目前的场景需求，达到灵活管理，高效、充分使用数据的目的。

发明内容

本发明的目的是克服了上述现有技术的缺点，提供了一种满足灵活性、高效性、管理效率高的大数据环境下基于多方式结合实现数据编码优化管理的系统及方法。

为了实现上述目的，本发明的大数据环境下基于多方式结合实现数据编码优化管理的系统及方法如下：

该大数据环境下基于多方式结合实现数据编码优化管理的系统，其主要特点是，所述的系统包括：

资产编码定义模块，用于根据管理对象进行编码定义，维护基础标准体系来满足当前场景需求；

编码管理模块，与所述的资产编码定义模块相连接，用于根据实际需求对已有的编码规范进行操作管理，绑定数据模型字段；