[发明专利]一种构建数据类目、实现数据共享的方法及设备有效
申请号: | 201810403148.8 | 申请日: | 2018-04-28 |
公开(公告)号: | CN110414259B | 公开(公告)日: | 2023-08-25 |
发明(设计)人: | 李小健;邓浩;牛智鹏 | 申请(专利权)人: | 阿里巴巴集团控股有限公司 |
主分类号: | G06F21/62 | 分类号: | G06F21/62 |
代理公司: | 广州铸智知识产权代理有限公司 44886 | 代理人: | 孙丹丹 |
地址: | 英属开曼群岛大开*** | 国省代码: | 暂无信息 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 构建 数据 类目 实现 共享 方法 设备 | ||
1.一种构建数据类目的方法,其中,该方法包括:
从数据源获取数据表的元数据和日志数据;所述元数据用于描述所述数据表的属性;
解析所述数据表的日志数据,获取所述数据表之间的关联关系;
获取所述元数据对应的内容信息;
根据数据表之间的关联关系以及数据表中的元数据对应的内容信息,构建关于数据表的数据类目;
其中,从数据源获取数据表的元数据和日志数据,包括:
为每个数据源创建对应的项目空间,
从数据源获取数据表的元数据和日志数据,并存储于对应的项目空间。
2.根据权利要求1所述的方法,其中,该方法还包括:
解析所述数据表的日志数据,获取所述数据表的访问操作信息;
根据所述访问操作信息,在所述数据表中确定核心数据表。
3.根据权利要求2所述的方法,其中,所述访问操作信息包括单位时间的平均访问次数、预设时间内的活跃访问时间和表数据的数据增长率;
根据所述访问操作信息,在所述数据表中确定核心数据表,包括:
将数据表的所述平均访问次数、预设时间内的活跃访问时间和表数据的数据增长率分别与对应的判断阈值比较,若符合预设规则,则确定所述数据表为核心数据表。
4.根据权利要求2所述的方法,其中,根据数据表之间的关联关系以及数据表中的元数据对应的内容信息,构建关于数据表的数据类目,包括:
根据核心数据表之间的关联关系以及核心数据表中的元数据对应的内容信息,构建关于核心数据表的数据类目。
5.根据权利要求2-4中任一项所述的方法,其中,该方法还包括:
生成关于所述数据类目的关联图谱,其中,所述关联图谱包括点和连线,所述点表示核心数据表,所述连线表示核心数据表之间的关联关系。
6.根据权利要求1所述的方法,其中,获取所述元数据对应的内容信息,包括:
若所述元数据的字段存在对应的注释信息,则将所述注释信息确定为所述元数据对应的的内容信息;
若所述元数据的字段不存在对应的注释信息,则基于识别规则对所述字段的内容进行识别,获取所述字段的注释信息,作为所述元数据对应的内容信息。
7.根据权利要求6所述的方法,其中,该方法还包括:
比较第一数据表的元数据和第二数据表的元数据的字段内容相似程度;
若字段内容相似程度大于预设值,则将所述第一数据表和第二数据表确定为相似数据表;
根据所述第一数据表的字段,确定所述第二数据表对应字段的注释信息。
8.根据权利要求1所述的方法,其中,该方法还包括:
提供所述数据类目;
获取数据需求方基于所述数据类目确定的数据权限申请请求;
根据数据权限申请请求中所需求的数据表,从对应的数据源获取关于该数据表的业务数据;
向所述数据需求方开放所述业务数据的权限。
9.一种实现数据共享的方法,其中,该方法包括:
向数据需求方提供数据类目,其中,所述数据类目用于描述数据源中数据表之间的关联关系以及数据表中元数据对应的内容信息;
获取数据需求方基于所述数据类目确定的数据权限申请请求;
根据数据权限申请请求中所需求的数据表,从对应的数据源获取关于该数据表的业务数据;
向所述数据需求方开放所述业务数据的权限;
其中,从对应的数据源获取关于该数据表的业务数据,包括:
为每个数据源创建对应的项目空间;
从对应的数据源获取该数据表的业务数据,并存储于对应的项目空间。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于阿里巴巴集团控股有限公司,未经阿里巴巴集团控股有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201810403148.8/1.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置