[发明专利]基于分布式流计算的背压处理方法和系统有效
申请号: | 201611041838.0 | 申请日: | 2016-11-18 |
公开(公告)号: | CN108073445B | 公开(公告)日: | 2021-10-22 |
发明(设计)人: | 古乐乐 | 申请(专利权)人: | 腾讯科技(深圳)有限公司 |
主分类号: | G06F9/46 | 分类号: | G06F9/46;G06F9/50 |
代理公司: | 广州华进联合专利商标代理有限公司 44224 | 代理人: | 何平;邓云鹏 |
地址: | 518000 广东省深圳*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明涉及一种基于分布式流计算的背压处理方法和系统,该方法包括:接收上游计算节点发送的流数据并存储于流数据池中,流数据池中的流数据在本地进行流计算时被消耗;统计流数据池中的流数据占流数据池的总容量的数据占比;若统计的数据占比大于或等于第一阈值,则执行增加背压标记的操作;增加背压标记的操作用于使上游计算节点降低流数据发送速率;若统计的数据占比小于或等于第二阈值,则执行删除背压标记的操作;第二阈值小于第一阈值;删除背压标记的操作用于使上游计算节点提高流数据发送速率。本发明提供的基于分布式流计算的背压处理方法和系统,可以克服背压问题并保证流计算效率。 | ||
搜索关键词: | 基于 分布式 计算 处理 方法 系统 | ||
【主权项】:
1.一种基于分布式流计算的背压处理方法,包括:接收上游计算节点发送的流数据并存储于流数据池中,所述流数据池中的流数据在本地进行流计算时被消耗;统计所述流数据池中的流数据占所述流数据池的总容量的数据占比;若统计的所述数据占比大于或等于第一阈值,则执行增加背压标记的操作;所述增加背压标记的操作用于使所述上游计算节点降低流数据发送速率;若统计的所述数据占比小于或等于所述第二阈值,则执行删除所述背压标记的操作;所述第二阈值小于所述第一阈值;所述删除所述背压标记的操作用于使所述上游计算节点提高流数据发送速率。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于腾讯科技(深圳)有限公司,未经腾讯科技(深圳)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201611041838.0/,转载请声明来源钻瓜专利网。