[发明专利]一种宽表刷新的方法和装置有效
申请号: | 201410061251.0 | 申请日: | 2014-02-24 |
公开(公告)号: | CN104866487B | 公开(公告)日: | 2018-08-03 |
发明(设计)人: | 贾亮 | 申请(专利权)人: | 阿里巴巴集团控股有限公司 |
主分类号: | G06F17/30 | 分类号: | G06F17/30 |
代理公司: | 北京鸿德海业知识产权代理事务所(普通合伙) 11412 | 代理人: | 倪志华 |
地址: | 英属开曼群岛大开*** | 国省代码: | 开曼群岛;KY |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 刷新 方法 装置 | ||
1.一种宽表刷新的方法,其特征在于,分别读取预先配置的各应用系统的配置信息,针对读取的配置信息分别执行:
获取配置信息中应用系统所依赖的主题表信息,判断配置信息中应用系统所依赖的主题表是否均刷新完成,如果是,则利用所述主题表信息和应用系统对应的宽表信息,构造建表语句和数据插入语句;
执行所述建表语句和数据插入语句,得到该应用系统对应的宽表。
2.根据权利要求1所述的方法,其特征在于,所述判断配置信息中应用系统所依赖的主题表是否均刷新完成具体包括:
从数据仓库的元数据得到获取的各主题表所依赖的刷新任务,判断刷新任务是否完成,如果刷新任务完成,则对应的主题表刷新完成。
3.根据权利要求1所述的方法,其特征在于,利用所述主题表信息和应用系统对应的宽表信息,构造建表语句和数据插入语句具体包括:
加载建表语句模板,根据所述主题表信息中的字段、字段注释和字段类型以及所述宽表信息在所述建表语句模板中填入个性化部分的内容,得到建表语句;
加载数据插入语句模板,根据所述主题表信息中的字段、源表别名和关联字段以及所述宽表信息在所述数据插入语句模板中填入个性化部分的内容,得到数据插入语句。
4.根据权利要求3所述的方法,其特征在于,在构造建表语句和数据插入语句之前,还包括:
依据配置信息中的黑名单字段对所述主题表信息中的字段进行过滤处理,根据配置信息中的源表别名对过滤后剩余的字段进行别名化处理;
在构造建表语句和数据插入语句时采用的所述主题表中的字段为经过所述过滤处理和别名化处理之后的字段。
5.根据权利要求1至4任一权项所述的方法,其特征在于,时效性要求较高的应用系统依赖部分主题表;
时效性要求较低的应用系统依赖全部主题表。
6.一种宽表刷新的装置,其特征在于,该装置包括:
配置读取单元,用于分别读取预先配置的各应用系统的配置信息;
宽表刷新单元,用于分别对所述配置读取单元读取的配置信息进行处理;
所述宽表刷新单元具体包括:
信息获取子单元,用于获取配置信息中应用系统所依赖的主题表信息和应用系统对应的宽表信息;
刷新判断子单元,用于判断配置信息中应用系统所依赖的主题表是否均刷新完成;
语句构造子单元,用于在所述刷新判断子单元的判断结果为是时,利用所述主题表信息和所述宽表信息,构造建表语句和数据插入语句;
语句执行子单元,用于执行所述建表语句和数据插入语句,得到该应用系统对应的宽表。
7.根据权利要求6所述的装置,其特征在于,所述刷新判断子单元从数据仓库的元数据得到获取的各主题表所依赖的刷新任务,判断刷新任务是否完成,如果刷新任务完成,则对应的主题表刷新完成。
8.根据权利要求6所述的装置,其特征在于,所述语句构造子单元在构造建表语句和数据插入语句时,具体执行:
加载建表语句模板,根据所述主题表信息中的字段、字段注释和字段类型以及所述宽表信息在所述建表语句模板中填入个性化部分的内容,得到建表语句;
加载数据插入语句模板,根据所述主题表信息中的字段、源表别名和关联字段以及所述宽表信息在所述数据插入语句模板中填入个性化部分的内容,得到数据插入语句。
9.根据权利要求8所述的装置,其特征在于,所述语句构造子单元在构造建表语句和数据插入语句之前,还用于依据配置信息中的黑名单字段对所述主题表信息中的字段进行过滤处理,根据配置信息中的源表别名对过滤后剩余的字段进行别名化处理。
10.根据权利要求6至9任一权项所述的装置,其特征在于,时效性要求较高的应用系统依赖部分主题表;
时效性要求较低的应用系统依赖全部主题表。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于阿里巴巴集团控股有限公司,未经阿里巴巴集团控股有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201410061251.0/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种并行主题挖掘方法及装置
- 下一篇:一种数据处理方法及电子设备