[发明专利]数据处理方法、装置、设备及计算机可读存储介质有效
申请号: | 202110835775.0 | 申请日: | 2021-07-23 |
公开(公告)号: | CN113297184B | 公开(公告)日: | 2021-12-28 |
发明(设计)人: | 邢艳肖;杨瀚清;柏强利 | 申请(专利权)人: | 北京达佳互联信息技术有限公司 |
主分类号: | G06F16/21 | 分类号: | G06F16/21;G06F16/23;G06F16/2457 |
代理公司: | 北京集佳知识产权代理有限公司 11227 | 代理人: | 王娇娇 |
地址: | 100089 北京市海淀*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 数据处理 方法 装置 设备 计算机 可读 存储 介质 | ||
1.一种数据处理方法,其特征在于,所述方法包括:
确定多个数据表中的待匹配数据表;
基于数据表中字段与标准维度之间的映射关系,获得多个数据表中字段对应的标准维度,所述标准维度用于指示数据表中字段的含义;
基于所述待匹配数据表中字段对应的待匹配的标准维度和剩余数据表中字段对应的标准维度,从剩余数据表中获得与所述待匹配数据表具有关联关系的目标数据表,所述剩余数据表为所述多个数据表中除所述待匹配数据表之外的数据表;
响应获得与所述待匹配数据表具有关联关系的目标数据表,基于所述待匹配数据表和所述目标数据表,构建所述待匹配数据表的数据模型,所述数据模型用于可视化所述待匹配数据表和所述目标数据表之间的关联关系;
响应没有获得与所述待匹配数据表具有关联关系的目标数据表,构建所述待匹配数据表的单数据表模型,所述单数据表模型用于指示含有一个待匹配数据表。
2.根据权利要求1所述的方法,其特征在于,所述确定多个数据表中的待匹配数据表包括:
基于表类型属性,对所述多个数据表进行划分,以确定所述多个数据表中的事实表和维度表,所述事实表为所述待匹配数据表,所述维度表为所述剩余数据表。
3.根据权利要求1或2所述的方法,其特征在于,所述基于所述待匹配数据表中字段对应的待匹配的标准维度和剩余数据表中字段对应的标准维度,从剩余数据表中获得与所述待匹配数据表具有关联关系的目标数据表包括:
基于所述待匹配数据表中字段对应的第一标准维度,从所述剩余数据表中获得具有所述第一标准维度的维度表,将所述具有所述第一标准维度的维度表确定为与所述待匹配数据表具有直接关联关系的第一目标维度表;
所述响应获得与所述待匹配数据表具有关联关系的目标数据表,基于所述待匹配数据表和与所述待匹配数据表具有关联关系的目标数据表,构建所述待匹配数据表的数据模型包括:响应获得所述第一目标维度表且所述剩余数据表中的维度表遍历完毕,基于所述待匹配数据表和所述第一目标维度表,构建所述待匹配数据表的星型模型。
4.根据权利要求3所述的方法,其特征在于,所述基于所述待匹配数据表中字段对应的待匹配的标准维度和剩余数据表中字段对应的标准维度,从剩余数据表中获得与所述待匹配数据表具有关联关系的目标数据表还包括:
获得所述剩余数据表中存在未匹配的第一维度表集合,基于所述第一目标维度表中字段对应的第二标准维度,从所述第一维度表集合中获得具有所述第二标准维度的维度表,将所述具有所述第二标准维度的维度表确定为与所述待匹配数据表具有间接关联关系的第二目标维度表;
所述响应获得与所述待匹配数据表具有关联关系的目标数据表,基于所述待匹配数据表和与所述待匹配数据表具有关联关系的目标数据表,构建所述待匹配数据表的数据模型包括:响应获得所述第二目标维度表和所述剩余数据表中的维度表遍历完毕,基于所述待匹配数据表、所述第一目标维度表和所述第二目标维度表,构建所述待匹配数据表的雪花模型。
5.根据权利要求4所述的方法,其特征在于,所述基于所述待匹配数据表中字段对应的待匹配的标准维度和剩余数据表中字段对应的标准维度,从剩余数据表中获得与所述待匹配数据表具有关联关系的目标数据表还包括:
每确定出一个第二目标维度表,基于当前确定出的第二目标维度表中字段对应的第三标准维度,从其他维度表中获得具有所述第三标准维度的维度表,将所述具有第三标准维度的维度表确定为与所述待匹配数据表具有间接关联关系的第三目标维度表,所述其他维度表为所述剩余维度表中除所述第一目标维度表和所述第二目标维度表之外的维度表;
所述响应获得与所述待匹配数据表具有关联关系的目标数据表,基于所述待匹配数据表和与所述待匹配数据表具有关联关系的目标数据表,构建所述待匹配数据表的数据模型包括:响应获得所述第三目标维度表和所述剩余数据表中的维度表遍历完毕,基于所述待匹配数据表、所述第一目标维度表、所述第二目标维度表和所述第三目标维度表,构建所述待匹配数据表的雪花模型。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京达佳互联信息技术有限公司,未经北京达佳互联信息技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110835775.0/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种3D打印屏幕保护膜的制备装置
- 下一篇:一种模具加工系统