[发明专利]元数据处理方法及设备有效
申请号: | 201110235136.7 | 申请日: | 2011-08-16 |
公开(公告)号: | CN102279886A | 公开(公告)日: | 2011-12-14 |
发明(设计)人: | 杨大鹏;李炅宇;王彦博;靳军;赵俊 | 申请(专利权)人: | 中国民生银行股份有限公司 |
主分类号: | G06F17/30 | 分类号: | G06F17/30 |
代理公司: | 北京同立钧成知识产权代理有限公司 11205 | 代理人: | 马爽 |
地址: | 100031 *** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 数据处理 方法 设备 | ||
1.一种元数据处理方法,其特征在于,包括:
元数据处理设备接收用户发送的元数据处理指令,响应所述元数据处理指令获取数据抽取、转换和加载ETL执行日志,并从数据仓库获取第一数据库定义语言DDL命令,其中所述第一DDL命令用于对所述ETL执行日志包括的数据对象进行节点定义;
所述元数据处理设备对所获取的ETL执行日志进行解析,以获取第二DDL命令和数据操作语言DML命令,其中所述第二DDL命令用于对所述ETL执行日志包括的临时对象进行节点定义,所述DML命令用于记录在ETL执行过程中所述数据对象和/或所述临时对象的转换操作;
所述元数据处理设备通过解析所述第一DDL命令、所述第二DDL命令和所述DML命令获取用于表示所述数据对象和所述临时对象的数据流向的元数据,并向所述用户反馈所述元数据。
2.根据权利要求1所述的元数据处理方法,其特征在于,在获取用于表示所述数据对象和所述临时对象的数据流向的元数据的步骤之后还包括:
所述元数据处理设备屏蔽表示所述数据对象和所述临时对象的数据流向的元数据中的临时对象,以获取用于表示所述数据对象的数据流向的元数据。
3.根据权利要求2所述的元数据处理方法,其特征在于,所述数据对象包括表和视图;相应地,在获取用于表示所述数据对象的数据流向的元数据的步骤之后还包括:
所述元数据处理设备屏蔽所生成的表示所述数据对象的数据流向的元数据中的视图,以生成用于表示表的数据流向的元数据。
4.根据权利要求1至3任一所述的元数据处理方法,其特征在于,所述元数据处理设备包括服务端和浏览器端;相应地,所述元数据处理方法还包括:所述元数据处理设备的服务端将所生成的用于表示数据流向的元数据发送至所述浏览器端展示。
5.一种元数据处理设备,其特征在于,包括:
获取模块,用于获取ETL执行日志,并从数据仓库获取第一DDL命令,其中所述第一DDL命令用于对所述ETL执行日志包括的数据对象进行节点定义;
日志解析模块,用于对所获取的ETL执行日志进行解析,以获取第二DDL命令和数据操作语言DML命令,其中所述第二DDL命令用于对所述ETL执行日志包括的临时对象进行节点定义,所述DML命令用于记录在ETL执行过程中所述数据对象和/或所述临时对象的转换操作;
元数据获取模块,用于通过解析所述第一DDL命令、所述第二DDL命令和所述DML命令获取用于表示所述数据对象和所述临时对象的数据流向的元数据。
6.根据权利要求5所述的元数据处理设备,其特征在于,所述元数据获取模块还用于屏蔽所述数据流向中的临时对象,以获取用于表示所述数据对象的数据流向的元数据。
7.根据权利要求6所述的元数据处理设备,其特征在于,所述元数据获取模块还用于屏蔽所生成的表示所述数据对象的数据流向的元数据中的视图,以生成用于表示表的数据流向的元数据。
8.根据权利要求5至7任一所述的元数据处理设备,其特征在于,包括服务端和浏览器端;其中,所述获取模块、所述日志解析模块和所述元数据获取模块设置在所述服务端,且所述元数据获取模块还用于将所生成的用于表示数据流向的元数据发送至所述浏览器端展示。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中国民生银行股份有限公司,未经中国民生银行股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201110235136.7/1.html,转载请声明来源钻瓜专利网。