[发明专利]数据的聚合处理装置、方法和存储介质在审
申请号: | 202010573227.0 | 申请日: | 2020-06-22 |
公开(公告)号: | CN111949681A | 公开(公告)日: | 2020-11-17 |
发明(设计)人: | 鄢贵海;卢文岩 | 申请(专利权)人: | 中科驭数(北京)科技有限公司 |
主分类号: | G06F16/242 | 分类号: | G06F16/242;G06F16/2455 |
代理公司: | 北京金咨知识产权代理有限公司 11612 | 代理人: | 秦景芳 |
地址: | 100190 北京市海淀区科学*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 数据 聚合 处理 装置 方法 存储 介质 | ||
本说明书提供了一种数据的聚合处理装置、方法和存储介质。其中,该装置可以通过序列分组模块先将较复杂的目标数据序列拆分成多个子序列,进而可以通过聚合模块组利用所包含的多个并联的聚合模块以并行处理的方式同时对多个子序列进行聚合处理得到对应的中间处理结果,再通过合并模块合并中间处理结果,得到针对目标数据序列的聚合处理结果,完成了针对目标数据序列的聚合处理,从而能够解决现有方法中存在的聚合处理效率低、处理过程耗时长的技术问题。达到提高聚合处理效率,减少用户的等待时间的技术效果。
技术领域
本说明书属于数据库处理技术领域,尤其涉及数据的聚合处理装置、方法和存储介质。
背景技术
随着技术的发展,数据库所包含的数据量越来越庞大。相应的,服务器在响应用户针对数据库的查询请求,对数据库中的数据进行聚合处理(或操作)所需要的耗时也变得越来越长,导致用户往往需要等待较长的时间,才能得到服务器反馈的聚合处理结果。
因此,亟需一种能够达到针对数据库中的数据高效地进行聚合处理的方法。
发明内容
本说明书提供了一种数据的聚合处理装置、方法和存储介质,以提高聚合处理效率,解决现有方法中存在的聚合处理效率低、处理过程耗时长的技术问题。
本说明书提供的一种数据的聚合处理装置、方法和存储介质是这样实现的:
一种数据的聚合处理装置,包括序列分组模块、聚合模块组,和合并模块,其中,序列分组模块与聚合模块组相连,合并模块与聚合模块组相连;
序列分组模块,用于将所接入的数据库中的目标数据序列,划分为多个子序列组,得到多个子序列;其中,所述目标数据序列包括多个数据元素;
聚合模块组包括多个并联的聚合模块,所述聚合模块组用于获取多个子序列,并通过多个并联的聚合模块对所述多个子序列并行进行聚合处理,得到对应的多个子序列的中间处理结果;
合并模块,用于合并所述中间处理结果,得到针对目标数据序列的聚合处理结果。
在一个实施例中,在所述聚合模块组和所述序列分组模块之间还连接有子序列缓存模块,所述子序列缓存模块用于缓存所述多个子序列。
在一个实施例中,所述子序列缓存模块包括片上存储器,所述子序列缓存模块将所述多个子序列缓存在片上存储器中。
在一个实施例中,所述子序列缓存模块还包括DDR存储器和/或SSD存储器,所述子序列缓存模块在所述片上存储器的存储空间不满足存储要求的情况下,将所述多个子序列缓存在所述DDR存储器和/或SSD存储器中。
在一个实施例中,在所述合并模块和所述聚合模块组之间还连接有中间处理结果缓存模块,所述中间处理结果缓存模块用于缓存多个中间处理结果。
在一个实施例中,所述中间处理结果缓存模块包括片上存储器,所述中间处理结果缓存模块将所述多个中间处理结果缓存在片上存储器中。
在一个实施例中,在所述聚合模块组和所述序列分组模块之间还连接有子序列分组模块组,其中,所述子序列分组模块组包括多个子序列分组模块,所述多个子序列分组模块用于对所述多个子序列中的各个子序列所包含的数据元素进行分组处理,将所述多个子序列中的子序列分别拆分成多个单位子序列。
在一个实施例中,所述聚合模块包括多个逻辑操作单元,所述多个逻辑操作单元包括以下至少之一:加法单元、除法单元、比较单元。
在一个实施例中,所述装置还包括配置端口,所述配置端口与所述聚合模块组中聚合模块相连,所述配置端口用于接收用户设置的聚合处理的模式配置参数。
在一个实施例中,所述模块用于根据所述模式配置参数组合多个逻辑操作单元,以对子序列进行对应的模式类型的聚合处理。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中科驭数(北京)科技有限公司,未经中科驭数(北京)科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010573227.0/2.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置