[发明专利]一种构建数据类目、实现数据共享的方法及设备有效
申请号: | 201810403148.8 | 申请日: | 2018-04-28 |
公开(公告)号: | CN110414259B | 公开(公告)日: | 2023-08-25 |
发明(设计)人: | 李小健;邓浩;牛智鹏 | 申请(专利权)人: | 阿里巴巴集团控股有限公司 |
主分类号: | G06F21/62 | 分类号: | G06F21/62 |
代理公司: | 广州铸智知识产权代理有限公司 44886 | 代理人: | 孙丹丹 |
地址: | 英属开曼群岛大开*** | 国省代码: | 暂无信息 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 构建 数据 类目 实现 共享 方法 设备 | ||
本申请提供了构建数据类目及实现数据共享的方案,该方案在构建数据类目时,并非基于特定的业务应用,而是基于内容信息来面向开放的、不确定的需求,同时包含了数据表之间的关联关系,因此能够形成全量的数据类目,并可以用于分析数据血缘,从而打通城市数据各方的数据孤岛。此外,基于数据类目实现业务数据共享时,可以避免了盲目的数据需求申请,并且由于数据无需由数据提供方推送到前置机,整个过程均可以在一个设备中完成,能够保证所有数据遵循同一的标准进行处理,提高了数据的质量。
技术领域
本申请涉及信息技术领域,尤其涉及一种构建数据类目、实现数据共享的方法及设备。
背景技术
随着信息化的发展,大部分城市的政务、公共服务等部门都有数据共享开放的需求,例如政府部门A在其某项业务中需要使用到政府部门B的数据,此时就需要政府部门B能够将相关的数据共享给政府部门A使用。其中,城市的政务、公共服务等部门在实现政务、公共服务等业务处理时使用的数据可以称为城市数据。
由于城市数据对于保密性、数据安全等因素有较高的要求,当前普遍采用的共享方案如图1所示,当数据需求方(例如政府部门A)有明确的业务应用时,先初步提出数据需求,例如需要关于本市各个区县的居民个人所得税的平均缴纳数据)。需要由协调部门(如电子政务办)协调数据提供方(例如政府部门B)沟通具体数据需求,例如政府部门B只有本市居民个人所得税的实际缴纳额的数据,通过三方沟通协调之后,由政府部门B提供需要有政府部门B对数据进行加工,然后推送到政府部门B的前置机,再统一由协调部门同步到数据的归集库中,并构建数据类目供政府部门A使用。政府部门A在需要使用数据时从归集库获取需要的数据。
现有的共享方案是在数据需求方有明确的业务应用后,才发起数据需求申请、明确数据需求,然后再针对本次的业务应用来开发数据、构建数据类目。每次构建的数据类目均与本次的业务应用相关,是无法形成全量的数据类目。同时,前置机、数据需求方、数据提供方、数据的归集库都不在同一套平台内,无法打通元数据、分析数据血缘,对后续的数据使用情况、产生的价值无法评估。由此,数据共享时,没有全量的数据类目,且无法分析数据血缘,各方之间容易形成数据孤岛,不利于构建完整的数据体系。
本申请的一个目的是提供一种构建数据类目以及实现数据共享的方案,用以解决城市数据共享时无全量数据类目、无法分析数据血缘,容易形成数据孤岛的问题。
本申请提供了一种构建数据类目的方法,该方法包括:
从数据源获取数据表的元数据和日志数据;
解析所述数据表的日志数据,获取所述数据表之间的关联关系;
获取所述元数据对应的内容信息;
根据数据表之间的关联关系以及数据表中的元数据对应的内容信息,构建关于数据表的数据类目。
本申请还提供了一种实现数据共享的方法,该方法包括:
向数据需求方提供数据类目,其中,所述数据类目用于描述数据源中数据表之间的关联关系以及数据表中元数据对应的内容信息;
获取数据需求方基于所述数据类目确定的数据权限申请请求;
根据数据权限申请请求中所需求的数据表,从对应的数据源获取关于该数据表的业务数据;
向所述数据需求方开放所述业务数据的权限。
基于本申请的另一方面,还提供了一种构建数据类目的设备,该设备包括:
数据归集装置,用于从数据源获取数据表的元数据和日志数据;
数据解析装置,用于解析所述数据表的日志数据,获取所述数据表之间的关联关系,以及获取所述元数据对应的内容信息;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于阿里巴巴集团控股有限公司,未经阿里巴巴集团控股有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201810403148.8/2.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置