[发明专利]一种实现数据动态缓存处理的装置及方法

说明书

技术领域

本发明涉及数据处理技术领域，特别是涉及一种实现数据动态缓存处理的装置及方法。

背景技术

随着信息技术的不断发展，企业生产经营对信息系统的依赖程度越来越高，反映企业经营的各种报表也越来越多，如经营分析类报表的业务覆盖面越来越广，对于报表查询的效率要求也越来越高。但是，对于经营分析类的报表一般需要进行大数据量的处理，特别是对于集团企业、跨国公司等大型企业单位，这类报表的处理往往需要进行海量数据的处理。因此，目前报表处理系统在进行报表处理中已经越来越不能满足效率要求，如何提高报表处理的速度成为各企业在不断研究的问题。

目前，报表查询处理系统的缓存功能主要通过将历史点击过的报表以报表展现文件的格式(如PDF、EXCEL、HTML格式)进行存储，在下次访问相同条件的报表时，直接从读取已保存的报表文件进行展现。由于该缓存机制是通过按文件存储的方式实现，没有将报表的数据进行结构化的存储，因此存在以下几方面不足：

1、不同的报表经常出现使用相同上游数据的情况，其处理的维度及取数范围往往存在一定的公共数据，目前的报表数据处理中一般采用传统的报表处理方式，对上述报表处理中的公共数据必需在不同的报表处理中分别进行处理，产生了一定的重复计算，造成系统资源的浪费，并使得系统处理效率不高。

2、同一张报表在不同维度上的查询条件往往存在某些相关的统计特性，而目前的报表数据处理系统在缓存机制上采用传统的按照查询条件独立存放缓存数据，容易造成数据的重复计算以及物理存放空间的冗余。

发明内容

(一)要解决的技术问题

本发明为了克服目前报表数据处理中存在数据重复处理、重复存储，数据处理效率低、冗余存储造成系统资源浪费的问题，提出一种实现数据动态缓存处理的装置及方法。

(二)技术方案

为达到上述目的，本发明提供了一种实现数据动态缓存处理的装置，该装置包括查询装置1、报表处理分解装置2、数据管理装置3、数据处理装置4、数据缓存库5和报表展现装置6，其中：

查询装置1，连接于报表处理分解装置2，用于实现报表处理分解装置2与报表查询用户间的交互；

报表处理分解装置2，分别连接于查询装置1、数据管理装置3和数据处理装置4，用于接收从查询装置1传入的报表查询指令，将该报表查询指令分解成其所包含的多条指标查询指令，然后将多条指标查询指令再形成一串查询指令流，并将该串查询指令流传入数据处理装置4；

数据管理装置3，分别连接于报表处理分解装置2、数据处理装置4和报表展现装置6，用于提供逻辑处理、数据处理的依据；

数据处理装置4，分别连接于报表处理分解装置2、数据管理装置3、数据缓存库5和报表展现装置6，用于根据查询指令进行指标计算、高阶指标动态填充和报表数据存储操作；

数据缓存库5，分别连接于数据处理装置4和报表展现装置6，用于存储缓存数据；

报表展现装置6，分别连接于数据管理装置3、数据处理装置4和数据缓存库5，向用户提供报表展现界面，根据数据缓存库5的数据以及数据管理装置3的报表表样进行报表展现。

上述方案中，所述查询装置1向用户提供报表查询界面，接收用户输入的查询条件，该查询条件至少包括报表频度、报表日期、机构名称和报表展现单位，并将该查询条件信息传入报表处理分解装置2。

上述方案中，所述报表处理分解装置2接收到报表查询条件后，根据报表编号读取数据管理装置3中与该报表相关的指标清单，再根据每个指标的指标编号读取数据管理装置3中的维度编号组合，将查询条件中与维度编号相对应的值组合成指标维度值，最后以数据处理查询指令流的形式传入数据处理装置4。

上述方案中，所述数据管理装置3包括报表表样存储单元301、报表属性存储单元302、指标属性存储单元303和指标关系存储单元304，这4个单元相互独立，均分别连接于报表处理分解装置2、数据处理装置4和报表展现装置6，其中：

报表表样存储单元301，用于存储报表在空数据时的表样；

报表属性存储单元302，用于存储报表与指标的对应关系；

指标属性存储单元303，用于存储指标的属性信息；

指标关系存储单元304，用于存储指标和其高阶指标的对应关系。