[发明专利]分布式数据自动结构化入库方法及系统在审
申请号: | 201910971142.5 | 申请日: | 2019-10-14 |
公开(公告)号: | CN110737710A | 公开(公告)日: | 2020-01-31 |
发明(设计)人: | 施红;陆晓 | 申请(专利权)人: | 神州数码融信软件有限公司 |
主分类号: | G06F16/25 | 分类号: | G06F16/25;G06F16/23;G06F16/27;G06F16/28;G06F9/54 |
代理公司: | 11303 北京方韬法业专利代理事务所(普通合伙) | 代理人: | 党小林 |
地址: | 100000 北京市海淀区西北旺*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明提供了一种分布式数据自动结构化入库方法及系统。该方法包括:将需要入库的原始消息同步或者异步的写入kafka集群;利用kafka集群的消息队列对写入消息进行存储;根据所述kafka集群的消息,对所述kafka集群中的格式化对象执行入库操作。本发明提供的分布式数据自动结构化入库方法及系统完成了本系统与第三方系统的解耦,保证源系统的独立性和写数据的稳定性。 | ||
搜索关键词: | 集群 入库 分布式数据 自动结构 写入 格式化 第三方系统 对象执行 消息队列 原始消息 写数据 源系统 解耦 独立性 存储 保证 | ||
【主权项】:
1.一种分布式数据自动结构化入库方法,其特征在于,包括:/n将需要入库的原始消息同步或者异步的写入kafka集群;/n利用kafka集群的消息队列,对写入消息进行存储;/n根据所述kafka集群的消息,对所述kafka集群中的格式化对象执行入库操作。/n
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于神州数码融信软件有限公司,未经神州数码融信软件有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201910971142.5/,转载请声明来源钻瓜专利网。