[发明专利]一种分布式数据流处理方法及其系统有效
申请号: | 201110378247.3 | 申请日: | 2011-11-24 |
公开(公告)号: | CN103136217A | 公开(公告)日: | 2013-06-05 |
发明(设计)人: | 张旭;杨志雄;徐家;邓中华 | 申请(专利权)人: | 阿里巴巴集团控股有限公司 |
主分类号: | G06F17/30 | 分类号: | G06F17/30 |
代理公司: | 隆天国际知识产权代理有限公司 72003 | 代理人: | 张浴月;张龙哺 |
地址: | 开曼群岛大开曼*** | 国省代码: | 开曼群岛;KY |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明提供了一种分布式数据流处理方法,所述方法包括:将原始数据流分割成实时数据流和历史数据流;并行处理所述实时数据流和所述历史数据流,并分别产生各自的处理结果;以及将所产生的处理结果进行整合。本发明还提供了一种分布式数据流处理装置,所述装置包括:数据识别模块,用于将原始数据流分割成实时数据流和历史数据流;并行处理模块,用于并行处理所述实时数据流和所述历史数据流,并分别产生各自的处理结果;以及数据整合模块,用于将所产生的处理结果进行整合。本发明使得大数据量的实时计算成为可能,实时数据流的运算能够最大限度地以分布式并行处理,同时保证了大数据量处理和高实时性,提高了系统的反应速度。 | ||
搜索关键词: | 一种 分布式 数据流 处理 方法 及其 系统 | ||
【主权项】:
一种分布式数据流处理方法,所述方法包括:将原始数据流分割成实时数据流和历史数据流;并行处理所述实时数据流和所述历史数据流,并分别产生各自的处理结果;以及将所产生的处理结果进行整合。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于阿里巴巴集团控股有限公司,未经阿里巴巴集团控股有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201110378247.3/,转载请声明来源钻瓜专利网。
- 上一篇:冷风扇的取水器及具有该取水器的冷风扇
- 下一篇:一种空调器室外机