[发明专利]代码字段识别方法、装置、电子设备及存储介质在审

专利信息
申请号: 202110292981.1 申请日: 2021-03-18
公开(公告)号: CN113095064A 公开(公告)日: 2021-07-09
发明(设计)人: 李云锋;李鹏飞;王倩 申请(专利权)人: 杭州数梦工场科技有限公司
主分类号: G06F40/216 分类号: G06F40/216;G06F40/242;G06N20/00
代理公司: 北京博思佳知识产权代理有限公司 11415 代理人: 刘秀玲
地址: 310024 浙江省杭州*** 国省代码: 浙江;33
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 代码 字段 识别 方法 装置 电子设备 存储 介质
【说明书】:

发明实施例提供一种代码字段识别方法、装置、电子设备及存储介质。本发明实施例通过对数据表的目标字段的值进行统计,得到统计数据,若所述统计数据满足预设条件,根据所述统计数据获得所述目标字段对应的预设字段特征的特征值,将所述特征值输入已训练好的代码字段识别模型,根据所述代码字段识别模型的输出结果确定所述目标字段是否为代码字段,减少了人工投入,提高了代码字段识别的效率。

技术领域

本发明涉及数据处理技术领域,尤其涉及一种代码字段识别方法、装置、电子设备及存储介质。

背景技术

在政务、企业的大数据平台建设过程中,需要从众多的业务系统中抽取大量的业务系统表到数据仓库中,然后再对表中的业务数据进行清洗加工,使其成为可以再使用的数据资源。在数据治理的过程中,识别出业务系统表中的代码字段是一项重要任务,只有识别出代码字段,才能对该字段的数据质量进行判断,再通过加工处理,形成关键、标准的数据资源。

相关技术中,通过人工方式识别代码字段,效率低下。

发明内容

为克服相关技术中存在的问题,本发明提供了一种代码字段识别方法、装置、电子设备及存储介质,提高代码字段识别的效率。

根据本发明实施例的第一方面,提供一种代码字段识别方法,所述方法包括:

对数据表的目标字段的值进行统计,得到统计数据;

若所述统计数据满足预设条件,根据所述统计数据获得所述目标字段对应的预设字段特征的特征值;

将所述特征值输入已训练好的代码字段识别模型,根据所述代码字段识别模型的输出结果确定所述目标字段是否为代码字段。

根据本发明实施例的第二方面,提供一种代码字段识别装置,所述装置包括:

统计模块,用于对数据表的目标字段的值进行统计,得到统计数据;

特征值获得模块,用于若所述统计数据满足预设条件,根据所述统计数据获得所述目标字段对应的预设字段特征的特征值;

确定模块,用于将所述特征值输入已训练好的代码字段识别模型,根据所述代码字段识别模型的输出结果确定所述目标字段是否为代码字段。

根据本发明实施例的第三方面,提供一种电子设备,包括处理器以及用于存储所述处理器的可执行指令的存储器;

所述处理器被配置为:

对数据表的目标字段的值进行统计,得到统计数据;

若所述统计数据满足预设条件,根据所述统计数据获得所述目标字段对应的预设字段特征的特征值;

将所述特征值输入已训练好的代码字段识别模型,根据所述代码字段识别模型的输出结果确定所述目标字段是否为代码字段。

根据本发明实施例的第四方面,提供一种计算机可读存储介质,所述计算机可读存储介质上存储有若干计算机指令,所述计算机指令被执行时进行如下处理:

对数据表的目标字段的值进行统计,得到统计数据;

若所述统计数据满足预设条件,根据所述统计数据获得所述目标字段对应的预设字段特征的特征值;

将所述特征值输入已训练好的代码字段识别模型,根据所述代码字段识别模型的输出结果确定所述目标字段是否为代码字段。

本发明实施例提供的技术方案可以包括以下有益效果:

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于杭州数梦工场科技有限公司,未经杭州数梦工场科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/202110292981.1/2.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top