[发明专利]用于处理实时数据流的系统框架及实时数据流处理方法在审
| 申请号： | 202011149931.X | 申请日： | 2020-10-23 |
| 公开（公告）号： | CN112286875A | 公开（公告）日： | 2021-01-29 |
| 发明（设计）人： | 高凡;李凡平;石柱国 | 申请（专利权）人： | 青岛以萨数据技术有限公司;北京以萨技术股份有限公司;安徽以萨数据技术有限公司 |
| 主分类号： | G06F16/14 | 分类号： | G06F16/14;G06F16/178;G06F16/18;G06F16/182;G06F16/215;G06F16/242;G06F16/958 |
| 代理公司： | 北京酷爱智慧知识产权代理有限公司 11514 | 代理人： | 向霞 |
| 地址： | 266000 山东省青岛市黄*** | 国省代码： | 山东;37 |
| 权利要求书： | 查看更多 | 说明书： | 查看更多 |
| 摘要： | 本发明实施例公开了一种用于处理实时数据流的系统框架及方法，系统框架包括：分布式发布订阅消息系统，用于接收实时数据流，并将其推入文件夹；数据传输系统，用于监听文件夹，并在文件夹中有实时数据流进入时，将实时数据流推送到HDFS；HDFS，用于对实时数据流进行清洗，以得到目标数据，并将其推送至存储系统进行存储以供后端查询。实施本发明实施例，搭建了一种新的实时数据流系统框架，其包括分布式发布订阅消息系统、数据传输系统、HDFS及存储系统，通过该系统框架可对实时数据流进行处理及存储，其框架简单，所需要的服务器本身配置不高，降低了成本，且数据处理逻辑简单可行。 | ||
| 搜索关键词： | 用于 处理 实时 数据流 系统 框架 方法 | ||
【主权项】：
暂无信息
下载完整专利技术内容需要扣除积分，VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息，商用须获得专利权人授权。该专利全部权利属于青岛以萨数据技术有限公司;北京以萨技术股份有限公司;安徽以萨数据技术有限公司，未经青岛以萨数据技术有限公司;北京以萨技术股份有限公司;安徽以萨数据技术有限公司许可，擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作，请联系【客服】
本文链接：http://www.vipzhuanli.com/patent/202011149931.X/，转载请声明来源钻瓜专利网。
- 上一篇：一种正交时频扩展的咬尾Turbo编译码通信方法
- 下一篇：一种智能靶场
