[发明专利]一种数据仓库质量保障方法、装置和系统有效
申请号: | 201510791914.9 | 申请日: | 2015-11-17 |
公开(公告)号: | CN106708897B | 公开(公告)日: | 2020-03-27 |
发明(设计)人: | 吴勇军 | 申请(专利权)人: | 阿里巴巴集团控股有限公司 |
主分类号: | G06F16/28 | 分类号: | G06F16/28;G06F16/21 |
代理公司: | 北京三友知识产权代理有限公司 11127 | 代理人: | 李辉 |
地址: | 英属开曼群岛大开曼*** | 国省代码: | 暂无信息 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 数据仓库 质量 保障 方法 装置 系统 | ||
1.一种数据仓库质量保障方法,其特征在于,所述方法包括:
响应于接收数据模型的提交请求,判断所述数据模型是否符合数据模型设计规则,获得第一判断结果;若所述第一判断结果表明所述数据模型不符合所述数据模型设计规则,展示第一提示信息以用于提示所述数据模型不符合所述数据模型设计规则;
响应于接收代码的提交请求,判断所述代码是否符合代码开发规则,获得第二判断结果;若所述第二判断结果表明所述代码不符合所述代码开发规则,展示第二提示信息以用于提示所述代码不符合所述代码开发规则;
所述判断所述数据模型是否符合数据模型设计规则,获得第一判断结果包括:
获取第一物理表前缀名,将获取的所述第一物理表前缀名与合法物理表前缀名集合中的各物理表前缀名进行比较;若存在与所述第一物理表前缀名相同的前缀名,则确定所述第一物理表前缀名符合数据模型设计规则;若不存在,则确定所述第一物理表前缀名不符合数据模型设计规则;所述合法物理表前缀名集合包括符合预设的物理表前缀名命名规则的前缀名;
获取第一物理表后缀名,将获取的所述第一物理表后缀名与合法物理表后缀名集合中的各物理表后缀名进行比较;若存在与所述第一物理表后缀名相同的后缀名,则确定所述第一物理表后缀名符合数据模型设计规则;若不存在,则确定所述第一物理表后缀名不符合数据模型设计规则;所述合法物理表后缀名集合包括符合预设的物理表后缀名命名规则的后缀名;
获取分区字段的名称与格式,判断所述分区字段的名称与格式是否符合预先定义的分区字段设置规则;若是,则确定所述分区字段符合数据模型设计规则;若否,则确定所述分区字段不符合数据模型设计规则;
获取元数据,判断所述元数据是否符合完整性规则;若所述元数据符合完整性规则,则确定所述元数据符合数据模型设计规则;若否,则确定所述元数据不符合数据模型设计规则;
所述判断所述代码是否符合代码开发规则,获得第二判断结果包括:
获取输出表的数量与名称,判断所述输出表的数量与名称是否与所述输出表对应的任务设置一致;若一致,则确定所述输出表符合代码开发规则;若不一致,则确定所述输出表不符合代码开发规则;
对所述代码进行语法解析,判断所述代码是否符合预先定义的语法规则;若符合,则确定所述代码符合代码开发规则;若不符合,则确定所述代码不符合代码开发规则;
获取各任务节点对应的调度依赖关系,根据所述调度依赖关系判断所述任务节点是否与其调度的任务节点存在关联关系;若存在,确定所述调度依赖关系符合代码开发规则;若不存在,则确定所述调度依赖关系不符合代码开发规则;
根据任务、表与分区的关联关系,判断删除分区操作对应的表是否与当前任务具有关联关系;若是,则确定所述删除分区操作符合代码开发规则;若否,则确定所述删除分区操作不符合代码开发规则;
根据任务与表的关联关系,判断删除表操作对应的表是否与当前任务具有关联关系;若是,则确定所述删除表操作符合代码开发规则;若否,则确定所述删除表操作不符合代码开发规则。
2.根据权利要求1所述的方法,其特征在于,所述方法还包括:
响应于接收代码的执行请求,执行所述代码并判断代码执行结果是否符合数据执行质量规则,获得第三判断结果;若所述第三判断结果表明所述代码执行结果不符合所述数据执行质量规则,展示第三提示信息以用于提示所述代码执行结果不符合所述数据执行质量规则。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于阿里巴巴集团控股有限公司,未经阿里巴巴集团控股有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201510791914.9/1.html,转载请声明来源钻瓜专利网。
- 上一篇:半导体元件及其制造方法
- 下一篇:钢带处理设备的清洗装置及其控制方法