[发明专利]字段处理方法及装置、存储介质、电子装置在审
申请号: | 201910696468.1 | 申请日: | 2019-07-30 |
公开(公告)号: | CN110413596A | 公开(公告)日: | 2019-11-05 |
发明(设计)人: | 任双喜;张毅然 | 申请(专利权)人: | 北京明略软件系统有限公司 |
主分类号: | G06F16/21 | 分类号: | G06F16/21;G06F16/22 |
代理公司: | 北京康信知识产权代理有限责任公司 11240 | 代理人: | 王晓婷 |
地址: | 100086 北京市海淀区*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 字段类型 评价信息 原始表 字段 存储介质 电子装置 校验规则 字段处理 校验 | ||
本发明提供了一种字段处理方法及装置、存储介质、电子装置,其中,上述方法包括:获取原始表的多个字段类型;根据所述多个字段类型确定与所述多个字段类型对应的多个校验规则;根据所述多个校验规则对所述原始表的多个字段类型中的每个字段类型中的多个字段进行校验,确定所述每个字段类型中的多个字段的第一评价信息;根据所述第一评价信息确定所述多个字段类型的第二评价信息;其中,所述第二评价信息用于指示所述原始表的数据质量,采用上述技术方案,解决了相关技术中,无法对数据表中字段的数据质量进行评价等问题。
技术领域
本发明涉及计算机技术领域,具体而言,涉及一种字段处理方法及装置、存储介质、电子装置。
背景技术
在数据标准化工作中,随着新的数据表不断接入到数据库中,同时随着大数据技术飞速发展,大数据的应用也越来越广泛,而数据的准确性以及数据表的数据质量对数据所能产出的价值至关重要。
针对相关技术中,无法对数据表中字段的数据质量进行评价等问题,尚未提出有效的技术方案。
发明内容
本发明实施例提供了一种字段处理方法及装置、存储介质、电子装置,以至少解决相关技术中,无法对数据表中字段的数据质量进行评价等问题。
根据本发明的一个实施例,提供了一种字段处理方法,获取原始表的多个字段类型;根据所述多个字段类型确定与所述多个字段类型对应的多个校验规则;根据所述多个校验规则对所述原始表的多个字段类型中的每个字段类型中的多个字段进行校验,确定所述每个字段类型中的多个字段的第一评价信息;根据所述第一评价信息确定所述多个字段类型的第二评价信息;其中,所述第二评价信息用于指示所述原始表的数据质量。
在本发明实施例中,根据所述多个字段类型确定与所述多个字段类型对应的多个校验规则之前,所述方法还包括:设置不同的字段类型所对应的校验规则,其中,每个字段类型对应设置有一个或多个校验规则,所述校验规则包括:正则表达式。
在本发明实施例中,所述根据所述多个校验规则对所述原始表的多个字段类型中的每个字段类型中的多个字段进行校验,确定所述每个字段类型中的多个字段的第一评价信息,包括:根据所述每个字段类型所对应的一个或多个校验规则对所述每个字段类型中的多个字段进行校验;在所述每个字段类型对应一个校验规则的情况下,确定所述每个字段类型中的多个字段中的每个字段的第一字段分数,根据所述每个字段类型中的多个字段中的每个字段的第一字段分数确定所述第一评价信息;在所述每个字段对应多个校验规则的情况下,确定所述每个字段类型中的多个字段中的每个字段在所述多个校验规则下的第二字段分数,根据所述每个字段类型中的多个字段中的每个字段的第二字段分数确定所述第一评价信息。
在本发明实施例中,根据所述第一评价信息确定所述多个字段类型的第二评价信息,包括:根据所述多个字段类型中的每个字段类型中的多个字段中的每个字段的所述第一评价信息之和确定所述第二评价信息。
在本发明实施例中,所述获取原始表的多个字段类型,包括:根据所述原始表的字段类型的中文名和/或英文名获取所述原始表的多个字段类型。
在本发明实施例中,所述字段类型包括:日期类型、时间类型、纯文本类型。
在本发明实施例中,所述校验规则包括:日期类型校验规则、时间类型校验规则、纯文本类型校验规则。
根据本发明的另一个实施例,还提供了一种字段处理装置,包括:获取模块,用于获取原始表的多个字段类型;第一确定模块,用于根据所述多个字段类型确定与所述多个字段类型对应的多个校验规则;处理模块,用于根据所述多个校验规则对所述原始表的多个字段类型中的每个字段类型中的多个字段进行校验,确定所述每个字段类型中的多个字段的第一评价信息;第二确定模块,用于根据所述第一评价信息确定所述多个字段类型的第二评价信息;其中,所述第二评价信息用于指示所述原始表的数据质量。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京明略软件系统有限公司,未经北京明略软件系统有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910696468.1/2.html,转载请声明来源钻瓜专利网。