[发明专利]一种基于通道的双缓冲技术的实时数据流处理方法在审
申请号: | 201810180410.7 | 申请日: | 2018-03-05 |
公开(公告)号: | CN108494704A | 公开(公告)日: | 2018-09-04 |
发明(设计)人: | 佘堃 | 申请(专利权)人: | 电子科技大学 |
主分类号: | H04L12/835 | 分类号: | H04L12/835;H04L12/801;H04L12/879;H04L12/883 |
代理公司: | 成都弘毅天承知识产权代理有限公司 51230 | 代理人: | 徐金琼 |
地址: | 611731 四川省成*** | 国省代码: | 四川;51 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明公开了一种基于通道的双缓冲技术的实时数据流处理方法,属于数据信息处理技术领域,通过开启两个并行的数据接收线程和数据处理线程,在数据接收线程接收到数据后,通过辅助标志位找到未被数据处理模块读取的数据通道pipe,数据接收模块将接收到的数据通过push方法构造成数据结构data Wrapper后,加入到数据通道pipe中,辅助标志位的指向改变为此时不为空的数据通道pipe,数据处理模块便读取辅助标志位此时指向的这个不为空的数据通道pipe,进行数据处理,本发明解决了现有数据流处理方法采用固定的长数组,当通道内数组满后容易阻塞数据通道,且容易造成空间浪费,以及数据接收和处理的吞吐量低的问题。 | ||
搜索关键词: | 数据通道 标志位 读取 数据处理模块 数据接收线程 实时数据流 双缓冲技术 数组 指向 数据处理线程 数据接收模块 数据信息处理 数据流处理 数据处理 数据接收 数据结构 数据通过 固定的 阻塞 吞吐量 并行 | ||
【主权项】:
1.一种基于通道的双缓冲技术的实时数据流处理方法,其特征在于,包括以下步骤:步骤1:开启两个并行的数据接收线程和数据处理线程,创建n个数据通道pipe和一个记录正在被读取的数据通道pipe的辅助标志位,n≥2;步骤2:根据步骤1,数据接收线程接收到数据后,若通过辅助标志位找到一个未被读取的数据通道pipe,则将接收到的数据加入到数据通道pipe中;步骤3:根据步骤1,数据接收线程接收到数据后,若通过辅助标志位找到两个数据通道pipe,一个数据通道pipe为空,另一个数据通道pipe不为空,则将接收到的数据加入到空的数据通道pipe中,同时,辅助标志位的指向改变为不为空的数据通道pipe,此数据通道pipe中的数据进入数据处理线程。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于电子科技大学,未经电子科技大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201810180410.7/,转载请声明来源钻瓜专利网。