[发明专利]代码字段识别方法、装置、电子设备及存储介质在审
申请号: | 202110292981.1 | 申请日: | 2021-03-18 |
公开(公告)号: | CN113095064A | 公开(公告)日: | 2021-07-09 |
发明(设计)人: | 李云锋;李鹏飞;王倩 | 申请(专利权)人: | 杭州数梦工场科技有限公司 |
主分类号: | G06F40/216 | 分类号: | G06F40/216;G06F40/242;G06N20/00 |
代理公司: | 北京博思佳知识产权代理有限公司 11415 | 代理人: | 刘秀玲 |
地址: | 310024 浙江省杭州*** | 国省代码: | 浙江;33 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 代码 字段 识别 方法 装置 电子设备 存储 介质 | ||
本发明实施例提供一种代码字段识别方法、装置、电子设备及存储介质。本发明实施例通过对数据表的目标字段的值进行统计,得到统计数据,若所述统计数据满足预设条件,根据所述统计数据获得所述目标字段对应的预设字段特征的特征值,将所述特征值输入已训练好的代码字段识别模型,根据所述代码字段识别模型的输出结果确定所述目标字段是否为代码字段,减少了人工投入,提高了代码字段识别的效率。
技术领域
本发明涉及数据处理技术领域,尤其涉及一种代码字段识别方法、装置、电子设备及存储介质。
背景技术
在政务、企业的大数据平台建设过程中,需要从众多的业务系统中抽取大量的业务系统表到数据仓库中,然后再对表中的业务数据进行清洗加工,使其成为可以再使用的数据资源。在数据治理的过程中,识别出业务系统表中的代码字段是一项重要任务,只有识别出代码字段,才能对该字段的数据质量进行判断,再通过加工处理,形成关键、标准的数据资源。
相关技术中,通过人工方式识别代码字段,效率低下。
发明内容
为克服相关技术中存在的问题,本发明提供了一种代码字段识别方法、装置、电子设备及存储介质,提高代码字段识别的效率。
根据本发明实施例的第一方面,提供一种代码字段识别方法,所述方法包括:
对数据表的目标字段的值进行统计,得到统计数据;
若所述统计数据满足预设条件,根据所述统计数据获得所述目标字段对应的预设字段特征的特征值;
将所述特征值输入已训练好的代码字段识别模型,根据所述代码字段识别模型的输出结果确定所述目标字段是否为代码字段。
根据本发明实施例的第二方面,提供一种代码字段识别装置,所述装置包括:
统计模块,用于对数据表的目标字段的值进行统计,得到统计数据;
特征值获得模块,用于若所述统计数据满足预设条件,根据所述统计数据获得所述目标字段对应的预设字段特征的特征值;
确定模块,用于将所述特征值输入已训练好的代码字段识别模型,根据所述代码字段识别模型的输出结果确定所述目标字段是否为代码字段。
根据本发明实施例的第三方面,提供一种电子设备,包括处理器以及用于存储所述处理器的可执行指令的存储器;
所述处理器被配置为:
对数据表的目标字段的值进行统计,得到统计数据;
若所述统计数据满足预设条件,根据所述统计数据获得所述目标字段对应的预设字段特征的特征值;
将所述特征值输入已训练好的代码字段识别模型,根据所述代码字段识别模型的输出结果确定所述目标字段是否为代码字段。
根据本发明实施例的第四方面,提供一种计算机可读存储介质,所述计算机可读存储介质上存储有若干计算机指令,所述计算机指令被执行时进行如下处理:
对数据表的目标字段的值进行统计,得到统计数据;
若所述统计数据满足预设条件,根据所述统计数据获得所述目标字段对应的预设字段特征的特征值;
将所述特征值输入已训练好的代码字段识别模型,根据所述代码字段识别模型的输出结果确定所述目标字段是否为代码字段。
本发明实施例提供的技术方案可以包括以下有益效果:
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于杭州数梦工场科技有限公司,未经杭州数梦工场科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110292981.1/2.html,转载请声明来源钻瓜专利网。
- 上一篇:一种车载终端的运行日志管理方法和装置
- 下一篇:一种海洋牧场智能化管理系统