[发明专利]一种数据表快速汇总方法、装置、计算机设备及存储介质有效
申请号: | 202010270608.1 | 申请日: | 2020-04-08 |
公开(公告)号: | CN111459946B | 公开(公告)日: | 2023-03-21 |
发明(设计)人: | 邵健锋;崔巍 | 申请(专利权)人: | 深圳市今天国际物流技术股份有限公司 |
主分类号: | G06F16/22 | 分类号: | G06F16/22;G06F16/23;G06F16/2458 |
代理公司: | 深圳市精英专利事务所 44242 | 代理人: | 武志峰 |
地址: | 518000 广东省深圳市罗湖区*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 数据表 快速 汇总 方法 装置 计算机 设备 存储 介质 | ||
本发明公开了一种数据表快速汇总方法、装置、计算机设备及存储介质,其中,方法包括:若抽取出的记录的类型为一般记录,则判断所述一般记录是否为第N+1条记录:若是,则以查询时间、过滤条件字段为条件,执行建立加速记录的流程;若否,则将所述一般记录按照分组条件字段进行分组,并与同类记录的值求和,然后继续抽取下一条记录;若抽取出的记录的类型为加速记录,则将所述加速记录中的每条子记录按照分组条件字段进行分组,并与同类记录的值求和,然后将求和结果返回。本发明实施例提供的方法通过减少读取的记录量,可以有效的提高反复调用的求和效率,并且每次求和的结果,都可以对以后的求和做出贡献。
技术领域
本发明涉及数据表领域,尤其涉及一种数据表快速汇总方法、装置、计算机设备及存储介质。
背景技术
信息系统中经常会需要使用流水表,流水表是指对一类动作的每次执行都会产生一次记录的表,例如仓库的出入库记录、银行的交易流水等。而信息系统通常还需要记录流水的结果汇总,以提供用户查询,例如仓库的当前总库存清单、银行的账面余额等。因此,所有对这些值发生变化的操作,就必须同时录入流水,并修改汇总的值。
有时,由于软件设计缺陷、实现缺陷、系统不稳定或数据部分恢复的问题,会导致汇总值与流水不匹配。或者,由于用户的实际需求,导致汇总值无意义(例如用户想查看某一特定时刻的账户余额)。这些情况下,都需要对流水表进行分组求和。
分组求和需要对全表读取,而流水表数据量大,故求和操作会带来严重开销。目前,数据库可以提供的技术,只能涵盖排序,例如索引与聚集索引。这些技术在做分组求和时,可以有效的提高数据的筛选速度,但这些技术并不会减少需要求和的记录数量。
另外,部分系统会预制一些条件(例如每天0点对流水表做独立汇总),通过有计划的归档,减少实时业务系统的分组求和需求。但是当用户的条件不属于预制条件时,帮助有限或者没有帮助。对于查询场景复杂的系统,预制条件命中的概率过低,因此意义不明显。
发明内容
本发明实施例提供了一种数据表快速汇总方法、装置、计算机设备及存储介质,旨在解决现有技术中数据表在需要进行求和时开销大、不实用等问题。
本发明实施例提供一种数据表快速汇总方法,其中,包括:
当接收到查询指令时,取出数据表中距离查询时间最近且不晚于所述查询时间的N+1条记录,并根据插入时间对所述N+1条记录进行降序处理;
从前至后逐条抽取所述N+1条记录中的每一条记录,并获取抽取出的记录的类型;
若抽取出的记录的类型为一般记录,则判断所述一般记录是否为第N+1条记录:若是,则以查询时间、过滤条件字段为条件,执行建立加速记录的流程;若否,则将所述一般记录按照分组条件字段进行分组,并与同类记录的值求和,然后继续抽取下一条记录;
若抽取出的记录的类型为加速记录,则将所述加速记录中的每条子记录按照分组条件字段进行分组,并与同类记录的值求和,然后将求和结果返回;
其中,所述建立加速记录的流程包括:根据数据表中各记录的插入时间逐条汇总各条记录的值,直至汇总到加速记录或者汇总完所有记录,以查询时间在数据表中建立一条包含汇总结果的加速记录,并将汇总结果返回。
进一步,还包括:
当检测到对数据表中的记录进行变更操作的指令时,预先在编辑状态表中声明变更操作的范围。
进一步,所述建立加速记录的流程还包括:
定期检测编辑状态表中是否有属于待汇总范围的声明,若无则以查询时间在数据表中建立一条包含汇总结果的加速记录,并将汇总结果返回;若否则不建立加速记录,并将汇总结果返回。
进一步,还包括:
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于深圳市今天国际物流技术股份有限公司,未经深圳市今天国际物流技术股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010270608.1/2.html,转载请声明来源钻瓜专利网。