[发明专利]数据仓库可视化建模方法、装置及介质在审
申请号: | 202011284253.8 | 申请日: | 2020-11-17 |
公开(公告)号: | CN112364094A | 公开(公告)日: | 2021-02-12 |
发明(设计)人: | 朱潇婷;彭浩;张雪军;黄天德;谭必文 | 申请(专利权)人: | 珠海市卓轩科技有限公司 |
主分类号: | G06F16/26 | 分类号: | G06F16/26;G06F16/21 |
代理公司: | 广州嘉权专利商标事务所有限公司 44205 | 代理人: | 叶琦炜 |
地址: | 519000 广东省*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 数据仓库 可视化 建模 方法 装置 介质 | ||
1.一种数据仓库可视化建模方法,其特征在于,该方法包括:
全局规划,将用于业务的数据仓库以自顶向下创建业务数据总线;
数据引入,基于所述全局规划,根据所述业务数据总线配置对应的项目空间及物理数据源;
规范定义,根据所述业务数据总线及物理数据源构建可视化数据模型;
可视化分析,通过可视化界面对数据源的分布及详情进行可视化展示。
2.根据权利要求1所述的数据仓库可视化建模方法,其特征在于,所述全局规划包括:
根据业务全局,从顶层自下规划设计业务数据总线,具体包括划分命名空间、定义主题域及相关名词、划分管理单元、定义数据源及计算引擎源。
3.根据权利要求1所述的数据仓库可视化建模方法,其特征在于,所述数据引入包括:
基于全局设计定义的项目空间与物理数据源,将若干数量的业务系统及不同类型的数据抽取加载至目标数据库。
4.根据权利要求1所述的数据仓库可视化建模方法,其特征在于,所述数据引入包括:
配置数据源,根据数据总线需求,配置作为源数据的数据源,从对应数据库将数据进行导出;
数据抽取,根据数据源的类型及配置数据,进行数据的抽取及采集;
数据转换,对已采集的数据源的字段进行转换和过滤;
数据写入,将已过滤并转换后的数据源,按照配置的字段映射关系进行写入目标数据库;
目标数据源同步,将数据源导入至目标数据库对应表和字段,同步源数据与目标数据。
5.根据权利要求4所述的数据仓库可视化建模方法,其特征在于,所述数据抽取包括:
根据源数据源和目标数据源的类型读取相应的模板文件,组装数据参数,提交到数据抽取引擎中,创建任务执行的上下文,基于模板中配置预处理流程,通过反射调用相应的处理类进行数据的预处理,同时初始化读线程和写线程,提交到线程池执行抽取。
6.根据权利要求1所述的数据仓库可视化建模方法,其特征在于,所述规范定义包括:
结构化定义数据元素,其中数据元素包括维度、原子指标、业务限定、业务过程、统计周期及派生指标;
构建可视化数据模型,包括:通过可视化交互界面的配置创建维度表、事实表及汇总表时的组装sql语句,并从各个来源主表中同步数据到所创建的表中。
7.根据权利要求6所述的数据仓库可视化建模方法,其特征在于,所述维度表用于创建维度时,则自动创建维度表,并自动生成建表语句和对应字段数据的同步;所述事实表用于根据事实表的显示标识及主表信息,配置事实表的关联维度,自动生成建表语句和对应字段数据的同步;所述汇总表用于根据输入的表名称、统计粒度和事实表,自动生成建表语句和对应字段数据的同步sql。
8.根据权利要求1所述的数据仓库可视化建模方法,其特征在于,所述可视化分析包括资产服务及数据服务,其中资产服务用于根据采集的数据经过数据仓库可视化建模形成资产地图,通过可视化界面对资产地图进行展示、穿透查看及全局预览;所述。
9.一种数据仓库可视化建模装置,该装置包括存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机程序,其特征在于,所述处理器执行所述计算机程序时实现权利要求1-8任一所述的方法步骤。
10.一种计算机可读存储介质,所述计算机可读存储介质存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现如权利要求1-8任一所述的方法步骤。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于珠海市卓轩科技有限公司,未经珠海市卓轩科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202011284253.8/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种用于蔬菜远途转运的装载装置
- 下一篇:一种建筑用环保幕墙