[发明专利]存储数据表的方法、装置、计算机设备及可读存储介质在审
申请号: | 202010606659.7 | 申请日: | 2020-06-29 |
公开(公告)号: | CN111723210A | 公开(公告)日: | 2020-09-29 |
发明(设计)人: | 杨超;刘劲柏;胡琛 | 申请(专利权)人: | 深圳壹账通智能科技有限公司 |
主分类号: | G06F16/35 | 分类号: | G06F16/35;G06F16/332;G06F16/31;G06F16/36;G06F16/9535 |
代理公司: | 北京英特普罗知识产权代理有限公司 11015 | 代理人: | 程超 |
地址: | 518052 广东省深圳市*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 存储 数据表 方法 装置 计算机 设备 可读 介质 | ||
本发明公开了一种存储数据表的方法、装置、计算机设备及可读存储介质,该方法包括:获取待存储数据表;逐一计算所述待存储数据表与存储在数据库中的各个数据表的匹配度值;将匹配度值大于第一预设阈值的数据表与所述待存储数据表进行合并,以形成合并数据表;将所述待存储数据表与所述合并数据表存储在所述数据库中;其中,在数据表中包括多个字段以及每个字段的字段值;本发明通过深度挖掘数据表之间的关联关系,以将具有关联关系的数据表合并,从而形成不同维度的数据表,达到提高用户体验的效果。
技术领域
本发明涉及数据处理技术领域,具体涉及一种存储数据表的方法、装置、计算机设备及可读存储介质。
背景技术
数据管理是现今大数据时代,每个大型公司都面临的挑战。如何利用现有业务系统的数据,转化出高质量的数据集合,用于统一利用、二次开发,是长久以来的业务痛点。在现有的数据表存储场景中,仅是将待存储的数据表存储到数据库中,并不会将待存储的数据表与数据库中已存储的数据表进行关联;因此,不能挖掘出数据表之间的潜在联系,从而不能为用户提供更为详细的数据信息,用户体验度较差。
发明内容
本发明的目的在于提供一种存储数据表的方法、装置、计算机设备及可读存储介质,通过深度挖掘数据表之间的关联关系,以将具有关联关系的数据表合并,从而形成不同维度的数据表,达到提高用户体验的效果。
根据本发明的一个方面,提供了一种存储数据表的方法,具体包括以下步骤:
获取待存储数据表;
逐一计算所述待存储数据表与存储在数据库中的各个数据表的匹配度值;
将匹配度值大于第一预设阈值的数据表与所述待存储数据表进行合并,以形成合并数据表;
将所述待存储数据表与所述合并数据表存储在所述数据库中;
其中,在数据表中包括多个字段以及每个字段的字段值。
可选的,所述逐一计算所述待存储数据表与存储在数据库中的各个数据表的匹配度值,具体包括:
提取所述待存储数据表中的各个字段的字段名称;
当所述字段名称为英文名称时,判断在所述数据库中是否存在包含所述英文名称的目标数据表,若是,则将所述目标数据表的匹配度值设置为大于第一预设阈值的第一数值;
当所述字段名称为中文名称时,使用synonyms工具包确定出所述中文名称的近义词,判断在所述数据库中是否存在包含所述中文名称或所述近义词的目标数据表,若是,则将所述目标数据表的匹配度值设置为大于第一预设阈值的第一数值。
可选的,所述逐一计算所述待存储数据表与存储在数据库中的各个数据表的匹配度值,具体包括:
提取所述待存储数据表中的各个字段的字段描述;
使用word2vec工具对所述字段描述进行分词处理,并使用PCA主成分分析算法从分词处理后的字段描述中计算出关键词;
判断在所述数据库中是否存在目标数据表;其中,所述目标数据表中的任一字段的字段描述包含所述关键词;
若是,则将所述目标数据表的匹配度值设置为大于第一预设阈值的第一数值。
可选的,所述逐一计算所述待存储数据表与存储在数据库中的各个数据表的匹配度值,具体包括:
确定出所述待存储数据表中字段值为数值类型的目标字段;
提取所述目标字段下的所有字段值以形成第一向量;
从所述数据库的任一数据表中确定出字段值为数值类型的参考字段,并提取所述参考字段下的所有字段值以形成第二向量;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于深圳壹账通智能科技有限公司,未经深圳壹账通智能科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010606659.7/2.html,转载请声明来源钻瓜专利网。
- 上一篇:一种计数转向输送机
- 下一篇:热点数据分桶方法、系统和计算机设备