[发明专利]一种基于流及消息调度的实时数据计算及存储方法在审
申请号: | 202011608430.3 | 申请日: | 2020-12-30 |
公开(公告)号: | CN112597205A | 公开(公告)日: | 2021-04-02 |
发明(设计)人: | 姜宇;周含笑;刘源;于雷;王兆祥;董丽娜;李墨野;王建勋;赵辉;邵文杰;马刚 | 申请(专利权)人: | 哈尔滨航天恒星数据系统科技有限公司 |
主分类号: | G06F16/2455 | 分类号: | G06F16/2455;G06F16/27;G06F16/25;G06F16/28;G06F9/54 |
代理公司: | 北京君恒知识产权代理有限公司 11466 | 代理人: | 张林 |
地址: | 150028 黑龙江省哈尔滨市高新*** | 国省代码: | 黑龙江;23 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明涉及一种基于流及消息调度的实时数据计算及存储方法,包括如下步骤:步骤一、数据流缓冲,建立大数据高并发场景下的数据缓冲通道,采用kafka系统为数据消费者提供消峰后的稳定数据源;步骤二、实时数据分析,通过准实时流计算引擎,根据实际需求完成海量实时数据的在线运算分析;步骤三、实时数据存储,源数据根据时间点存入分布式时序数据库,实现大数据的实时性时序存储及历史数据检索。本发明提供的方法,可应用于海量数据的实时数据分析存储系统中,提升其快速数据处理能力、实时运算响应速度、海量数据存储能力以及满足数据订阅需求。 | ||
搜索关键词: | 一种 基于 消息 调度 实时 数据 计算 存储 方法 | ||
【主权项】:
暂无信息
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于哈尔滨航天恒星数据系统科技有限公司,未经哈尔滨航天恒星数据系统科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/202011608430.3/,转载请声明来源钻瓜专利网。