[发明专利]小包数据并行处理装置和方法在审
申请号: | 202010670061.4 | 申请日: | 2020-07-13 |
公开(公告)号: | CN111813759A | 公开(公告)日: | 2020-10-23 |
发明(设计)人: | 徐涛 | 申请(专利权)人: | 北京九维数安科技有限公司 |
主分类号: | G06F16/182 | 分类号: | G06F16/182;G06F16/18 |
代理公司: | 济南信达专利事务所有限公司 37100 | 代理人: | 李世喆 |
地址: | 101100 北京市通州区*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 小包 数据 并行 处理 装置 方法 | ||
1.小包数据并行处理装置,其特征在于,包括:输入数据存储模块、输出数据存储模块、数据调度控制模块、处理调度控制模块、至少两个输入缓冲模块、至少两个输出缓冲模块和至少两个数据处理模块;
所述输入数据存储模块,用于存储待处理的第一大包数据,其中,所述第一大包数据包括至少两个第一小包数据,每个所述第一小包数据的数据量不大于一个所述输入缓冲模块的容量;
所述数据调度控制模块,用于在检测到所述至少两个输入缓冲模块中存在空置的所述输入缓冲模块时,将所述输入数据存储模块中存储的所述第一小包数据转移至所述输入缓冲模块,其中,每一个所述输入缓冲模块同时仅能够缓存一个所述第一小包数据;
所述处理调度控制模块,用于在检测到所述至少两个数据处理模块中存在空闲的所述数据处理模块,且检测到存在缓存有所述第一小包数据的所述输入缓冲模块时,将所述输入缓冲模块中缓存的所述第一小包数据转移至空闲的所述数据处理模块,其中,每一个所述数据处理模块同时仅能够存储一个所述第一小包数据;
所述数据处理模块,用于对接收到的所述第一小包数据进行处理,获得第二小包数据;
所述处理调度控制模块,还用于在检测到存在已获得所述第二小包数据的所述数据处理模块,并检测到所述至少两个输出缓冲模块中存在空置的所述输出缓冲模块时,将所述数据处理模块中的所述第二小包数据转移至空置的所述输出缓冲模块;
所述数据调度控制模块,还用于在检测到所述至少两个输出缓冲模块中缓存有所述第二小包数据时,将所述输出缓冲模块中缓存的所述第二小包数据转移至所述输出数据存储模块。
2.根据权利要求1所述的装置,其特征在于,进一步包括:数据接口模块和数据信息存储模块;
所述数据接口模块,用于接收来自外部处理器的所述第一大包数据和数据信息,并将接收到的所述第一大包数据存储到所述输入数据存储模块,以及将所述数据信息存储到所述数据信息存储模块,其中,不同的所述第一小包数据对应不同的所述数据信息,所述数据信息用于描述所述第一小包数据的属性;
所述数据调度控制模块,还用于在从所述输出缓冲模块中读取到一个所述第二小包数据之后,将所述数据信息存储模块中存储的与该第二小包数据相对应的所述数据信息与该第二小包数据进行整合,并将整合后的该第二小包数据与相对应的所述数据信息存储到所述输出数据存储模块中;
所述输出数据存储模块,还用于对所述输出数据存储模块中各个整合后的所述第二小包数据和相对应的所述数据信息进行进一步合并,获得第二大包数据,并将所述第二大包数据发送给所述数据接口模块;
所述数据接口模块,还用于将所述第二大包数据输出。
3.根据权利要求2所述的装置,其特征在于,进一步包括:第一寄存器;
所述第一寄存器,用于存储数据调度规则和数据处理规则,其中,所述数据调度规则和所述数据处理规则由所述数据信息存储模块中所存储的所述数据信息而确定;
所述数据调度控制模块,用于根据所述数据调度规则,在一个所述输入缓冲模块处于空置状态时,将所述输入数据存储模块中的一个目标第一小包数据转移至该输入缓冲模块,其中,所述目标第一小包数据的数据处理需求与该输入缓冲模块相对应;
所述处理调度控制模块,用于根据所述数据调度规则,在一个所述数据处理模块处于空闲状态时,将一个目标输入缓冲模块中的所述第一小包数据转移至该数据处理模块,其中,所述目标输入缓冲模块中的所述第一小包数据的数据处理需求与该数据处理模块相对应;
所述数据处理模块,用于按照所接收到的所述第一小包数据的数据处理需求,根据所述第一寄存器中存储的所述数据处理规则,对所述接收到的所述第一小包数据进行数据处理。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京九维数安科技有限公司,未经北京九维数安科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010670061.4/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种燃煤发电系统用煤炭细碎机构
- 下一篇:一种覆膜装置
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置