[发明专利]一种数据清洗结果的测试方法、装置、存储介质及设备有效

专利信息
申请号: 202010903768.5 申请日: 2020-09-01
公开(公告)号: CN112035287B 公开(公告)日: 2023-07-14
发明(设计)人: 张珍 申请(专利权)人: 中国银行股份有限公司
主分类号: G06F11/07 分类号: G06F11/07;G06F16/215
代理公司: 北京集佳知识产权代理有限公司 11227 代理人: 柳欣
地址: 100818 *** 国省代码: 北京;11
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 一种 数据 清洗 结果 测试 方法 装置 存储 介质 设备
【说明书】:

本申请公开了一种数据清洗结果的测试方法、装置、存储介质及设备,能够确保数据清洗结果的测试能够高效准确智能的完成,大大减少测试成本,提高测试效率。该方法包括:首先接收用户输入的测试请求信息;其中,测试请求信息包括待清洗的数据信息,然后,对测试请求信息进行属性的全量验证,得到第一验证结果,接着,根据测试请求信息的属性进行抽样,得到抽样信息,进而可以利用预先构建的精准测试模型,对抽样信息进行验证,得到第二验证结果,最后,可以根据第一验证结果和第二验证结果,生成测试报告,完成测试。

技术领域

本申请涉及数据处理技术领域,尤其涉及一种数据清洗结果的测试方法、装置、存储介质及设备。

背景技术

随着大数据时代的到来,推进了数据需求量,从而使得在数据处理方面越来越复杂,通过数据清洗的方式对海量的数据进行挖掘分析,以抽取出有价值的信息是非常重要的,在此基础上,如何对大数据清洗进行准确测试,已成为当前面临的难点。

但是,现有对数据清洗结果的验证方式通常仅是通过人工对将清洗后的数据与之前的数据进行简单比对,以确定出清洗掉的数据是否为异常、无作用的数据,以测试出数据的清洗结果是否正确,但这种人工测试方式,主观性强、难以量化,不仅测试的效率低,而且还需要花费大量的人力资源。

发明内容

本申请实施例的主要目的在于提供一种数据清洗结果的测试方法、装置、存储介质及设备,能够确保数据清洗结果的测试能够高效准确智能的完成,大大减少测试成本,提高测试效率。

第一方面,本申请实施例提供了一种数据清洗结果的测试方法,包括:

接收用户输入的测试请求信息;所述测试请求信息包括待清洗的数据信息;

对所述测试请求信息进行属性的全量验证,得到第一验证结果;

根据所述测试请求信息的属性进行抽样,得到抽样信息;

利用预先构建的精准测试模型,对所述抽样信息进行验证,得到第二验证结果;

根据所述第一验证结果和所述第二验证结果,生成测试报告,完成测试。

可选的,所述接收用户输入的测试请求信息之后,方法还包括:

判断所述用户是否具有测试权限;

若是,则执行根据所述测试请求信息的属性进行抽样,得到抽样信息及后续步骤。

可选的,所述方法还包括:

若判断出所述用户不具有测试权限,则发出提示信息;

其中,所述提示信息包括文本信息、语音信息和频闪灯光信号中的至少一种。

可选的,所述方法还包括:

通过引流打标和/或人工造数的方式,获取训练数据;

按照预设清洗规则对所述训练数据进行清洗,得到清洗结果;

根据所述清洗结果对应的人工测试标签对初始精准测试模型进行测试训练,生成所述精准测试模型。

第二方面,本申请实施例还提供了一种数据清洗结果的测试装置,包括:

接收单元,用于接收用户输入的测试请求信息;所述测试请求信息包括待清洗的数据信息;

第一验证单元,用于对所述测试请求信息进行属性的全量验证,得到第一验证结果;

抽样单元,用于根据所述测试请求信息的属性进行抽样,得到抽样信息;

第二验证单元,用于利用预先构建的精准测试模型,对所述抽样信息进行验证,得到第二验证结果;

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中国银行股份有限公司,未经中国银行股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/202010903768.5/2.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top