[发明专利]一种动态实时同步多源大表数据的增强实时计算方法有效
申请号: | 202110947193.1 | 申请日: | 2021-08-18 |
公开(公告)号: | CN113407600B | 公开(公告)日: | 2021-11-23 |
发明(设计)人: | 刘军华;吴名朝 | 申请(专利权)人: | 浩鲸云计算科技股份有限公司 |
主分类号: | G06F16/2458 | 分类号: | G06F16/2458;G06F16/25;G06F16/27 |
代理公司: | 南京中盟科创知识产权代理事务所(特殊普通合伙) 32279 | 代理人: | 孙丽君 |
地址: | 210000 江苏省南*** | 国省代码: | 江苏;32 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明公开了一种动态实时同步多源大表数据的增强实时计算方法,该方法包括以下步骤:搭建分布式动态表管理组件;创建分布式动态表,并通过分布式动态表来标准化多源库表的数据结构;通过实时同步技术管理分布式动态表元数据变更信息的同步更新;初始化批量导入分布式动态表数据;核对导入数据的完整性;对分布式动态表中的数据进行实时更新;对数据同步更新过程进行实时数据的同步监控;将分布式动态表中的数据通过结构化查询语言转换成实时流数据的虚拟表;将虚拟表中的数据与预先配置的流数据进行结合流计算;输出流计算结果。有益效果:解决了实时计算结合外部数据源过亿大表下的复杂业务逻辑的实时计算要求。 | ||
搜索关键词: | 一种 动态 实时 同步 多源大表 数据 增强 计算方法 | ||
【主权项】:
暂无信息
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于浩鲸云计算科技股份有限公司,未经浩鲸云计算科技股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/202110947193.1/,转载请声明来源钻瓜专利网。