[发明专利]流计算系统中的数据处理方法、控制节点及流计算系统有效
| 申请号： | 201410082041.X | 申请日： | 2014-03-06 |
| 公开（公告）号： | CN103870340B | 公开（公告）日： | 2017-11-07 |
| 发明（设计）人： | 史云龙;夏命榛;何诚 | 申请（专利权）人： | 华为技术有限公司 |
| 主分类号： | G06F9/50 | 分类号： | G06F9/50 |
| 代理公司： | 北京同达信恒知识产权代理有限公司11291 | 代理人： | 黄志华 |
| 地址： | 518129 广东*** | 国省代码： | 广东;44 |
| 权利要求书： | 查看更多 | 说明书： | 查看更多 |
| 摘要： | 本发明公开了一种流计算系统中的数据处理方法、控制节点及流计算系统，该方法包括收集每个工作节点与其它工作节点之间的数据流量信息和每个工作节点的处理速度信息；根据收集到的数据流量信息和处理速度信息确定每个工作节点的优化并发度；根据工作节点的优化并发度对工作节点的并发度进行调整。本发明公开的方法和装置根据流计算系统中的实时数据对工作节点的并发度进行实时调整，使得工作节点的处理能力能够符合业务处理的实时需求。 | ||
| 搜索关键词： | 计算 系统 中的 数据处理 方法 控制 节点 | ||
【主权项】：
一种流计算系统中的数据处理方法，所述流计算系统包括控制节点和多个工作节点，其特征在于，该方法包括：所述控制节点根据配置的各个工作节点的并发度，调用所述多个工作节点中的一个或多个工作节点对数据流进行处理；其中，所述一个或多个工作节点中的每个工作节点包含一个或多个执行单元，所述每个工作节点的并发度用于表示所述每个工作节点所包含的执行单元的个数；当所述每个工作节点被调用对数据流进行处理时，具体由所述每个工作节点所包含的执行单元处理数据流；所述控制节点收集所述一个或多个工作节点中每个工作节点与其它工作节点之间的数据流量信息和所述一个或多个工作节点中每个工作节点的处理速度信息；所述控制节点根据收集到的数据流量信息和处理速度信息确定所述一个或多个工作节点中的每个工作节点的优化并发度；所述控制节点确定所述一个或多个工作节点中的每个工作节点的优化并发度与所述每个工作节点的并发度是否相同，如果不相同，则按照所述每个工作节点的优化并发度对所述每个工作节点的并发度进行调整。
下载完整专利技术内容需要扣除积分，VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息，商用须获得专利权人授权。该专利全部权利属于华为技术有限公司，未经华为技术有限公司许可，擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作，请联系【客服】
本文链接：http://www.vipzhuanli.com/patent/201410082041.X/，转载请声明来源钻瓜专利网。
