[发明专利]Hive数据库动态脱敏系统及实现方法

权利要求书

1.一种Hive数据库动态脱敏系统，其特征在于，该系统采用Java Web技术栈进行项目开发，基于SpringBoot框架实现，并结合Ranger技术栈实时动态脱敏hive数据库中的敏感数据；该系统包括，

脱敏算法管理单元，用于将脱敏算法以UDF函数的方式同步到Hive数据库；

脱敏算法规则单元，用于管理Hive数据、用户及脱敏算法之间的关系，并对Hive数据表中的字段设置脱敏规则；其中，脱敏规则支持对不同用户设置不同的脱敏算法。

2.根据权利要求1所述的Hive数据库动态脱敏系统，其特征在于，开发所述脱敏算法管理单元的web前端页面，脱敏算法管理单元的web前端页面是基于web技术中的jsp和js相关技术开发静态页面和功能函数，用户通过脱敏算法管理单元的web前端页面在线选择脱敏算法，同时脱敏算法管理单元的web前端页面支持仿真脱敏算法、Hash脱敏算法、截图脱敏算法、遮掩脱敏算法、加密脱敏算法及变换脱敏算法，同时支持用户对脱敏算法的参数进行自定义。

3.根据权利要求2所述的Hive数据库动态脱敏系统，其特征在于，开发所述脱敏算法管理单元的后台API接口，脱敏算法管理单元的后台API接口用于维护用户选择的脱敏算法，对脱敏算法参数进行管理。

4.根据权利要求3所述的Hive数据库动态脱敏系统，其特征在于，所述仿真脱敏算法适用于对身份证、护照、银行卡、手机号及统一社会信用码构成规则固定的数据进行脱敏，通过对固定规则的编码进行随机替换或映射替换，实现数据的仿真脱敏；

Hash脱敏算法支持多种加密方式，加密方式包括MD5、SHA及MD3；

变换脱敏算法支持对日期按年、月、日的维度进行取整，支持对数字进行取整；

遮掩脱敏算法支持设置脱敏字符的起止位置及遮掩所用的字符。

5.根据权利要求1所述的Hive数据库动态脱敏系统，其特征在于，开发所述脱敏规则管理单元的web前端页面，脱敏规则管理单元的web前端页面用于为系统管理员提供可视化的动态脱敏规则管理界面，系统管理员在线维护脱敏规则列表，并且新增脱敏规则和编辑已有脱敏规则。

6.根据权利要求5所述的Hive数据库动态脱敏系统，其特征在于，所述系统管理员对所需要脱敏的数据源及脱敏算法进行配置；具体如下：

(1)、选择需要进行脱敏的Hive数据表及数据字段；

(2)、按照用户的不同权限，设置对应的脱敏算法。

7.一种Hive数据库动态脱敏实现方法，其特征在于，该方法具体如下：

S1、通过脱敏算法管理单元实现脱敏算法的增加、修改及删除的操作；

S2、通过Hive组件将脱敏算法注册为Hive数据库的UDF函数；同时，将脱敏算法定义信息同步到Ranger组件中；

S3、通过脱敏规则管理单元实现对动态脱敏规则的增加、修改及删除的操作；

S4、通过Ranger的REST API将规则信息同步到Ranger组件，作为Hive数据库动态脱敏的策略；

S5、启用Hive组件中的Ranger插件，在查询Hive数据库时，基于原生功能，触发脱敏策略时，会在查询SQL中添加对应的脱敏UDF函数，实现查询过程中的数据实时脱敏。

8.根据权利要求7所述的Hive数据库动态脱敏实现方法，其特征在于，开发所述脱敏算法管理单元的web前端页面，脱敏算法管理单元的web前端页面是基于web技术中的jsp和js相关技术开发静态页面和功能函数，用户通过脱敏算法管理单元的web前端页面在线选择脱敏算法，同时脱敏算法管理单元的web前端页面支持仿真脱敏算法、Hash脱敏算法、截图脱敏算法、遮掩脱敏算法、加密脱敏算法及变换脱敏算法，同时支持用户对脱敏算法的参数进行自定义。