[发明专利]补充元数据描述的方法、装置、设备及存储介质有效
申请号: | 201910014080.9 | 申请日: | 2019-01-04 |
公开(公告)号: | CN109739894B | 公开(公告)日: | 2022-12-09 |
发明(设计)人: | 司东华;陈文浩;周可;兰冲;杨东方;罗迎宣;沈蓉;王惠平;敖林;郭腾达;覃娆;张玲;张志杰;汪亚男;邱毅 | 申请(专利权)人: | 深圳前海微众银行股份有限公司 |
主分类号: | G06F16/2457 | 分类号: | G06F16/2457;G06F16/16 |
代理公司: | 北京同达信恒知识产权代理有限公司 11291 | 代理人: | 李欣 |
地址: | 518052 广东省深圳市前海深港合作区前*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 补充 数据 描述 方法 装置 设备 存储 介质 | ||
1.一种补充元数据描述的方法,其特征在于,所述补充元数据描述的方法包括如下步骤:
获取预先保存的来源于各源数据库的全量元数据;
对所述全量元数据进行数据血缘分析,以构建所述全量元数据的不同数据表之间的血缘图谱;
从所述全量元数据中获取待补充描述的目标字段,并确定所述目标字段所属的目标表;
根据所述血缘图谱确定所述目标表的上游表;
分析所述上游表中的元数据字段与所述目标字段的相似度,根据所述相似度对所述目标字段进行补充描述;
所述对所述全量元数据进行数据血缘分析,以构建所述全量元数据的不同数据表之间的血缘图谱的步骤包括:
获取所述全量元数据的数据表类型,所述数据表类型包括大数据平台数据表和传统关系型数据表;
调用预设的血缘钩子函数以获取不同的大数据平台数据表之间的血缘关系,以及所述大数据平台数据表与所述传统关系型数据表之间的血缘关系;
调用预设的图数据库引擎,将获取到的所述不同的大数据平台数据表之间的血缘关系,以及所述大数据平台数据表与所述传统关系型数据表之间的血缘关系构建成血缘图谱。
2.如权利要求1所述的补充元数据描述的方法,其特征在于,所述获取预先保存的来源于各源数据库的全量元数据的步骤之前,还包括:
从预设的源数据库中拉取元数据;
将拉取到的所述元数据保存至预设的元数据资源库中。
3.如权利要求1至2中任一项所述的补充元数据描述的方法,其特征在于,所述分析所述上游表中的元数据字段与所述目标字段的相似度的步骤包括:
对所述上游表中的元数据字段进行去重处理;
从去重处理后的所述元数据字段中剔除预设的无效字段,得到待分析的元数据字段集;
根据预设算法,分别计算所述元数据字段集中的每个字段与所述目标字段的相似度。
4.如权利要求3所述的补充元数据描述的方法,其特征在于,所述根据预设算法,分别计算所述元数据字段集中的每个字段与所述目标字段的相似度的步骤包括:
根据编辑距离算法,分别计算所述元数据字段集中的每个字段转换成所述目标字段所需的最少编辑操作次数;
根据所述最少编辑操作次数计算所述元数据字段集中的每个字段与所述目标字段的相似度。
5.如权利要求3所述的补充元数据描述的方法,其特征在于,所述根据所述相似度对所述目标字段进行补充描述的步骤包括:
从所述元数据字段集中确定与所述目标字段的相似度最高的字段;
获取所述与所述目标字段的相似度最高的字段的字段描述信息,将所述与所述目标字段的相似度最高的字段的字段描述信息作为所述目标字段的补充描述。
6.如权利要求3所述的补充元数据描述的方法,其特征在于,所述根据所述相似度对所述目标字段进行补充描述的步骤包括:
按照所述相似度由高到低的顺序,将所述元数据字段集中的字段进行排列,得到所述目标字段的补充描述选择列表;
当接收到用户基于所述补充描述选择列表触发的选择指令时,确定用户所选择的字段;
获取用户所选择的字段的字段描述信息,将所述用户所选择的字段的字段描述信息作为所述目标字段的补充描述。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于深圳前海微众银行股份有限公司,未经深圳前海微众银行股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910014080.9/1.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置