[发明专利]一种新型的库结构数据处理方法

说明书

一种新型的库结构数据处理方法，包括竖结构数据库，其特征在于，竖结构数据库按照一个分类标识对应一个关键字的规则建立映射竖表，竖结构数据库的数据处理方法包括：S1：对一级分类标识所对应的一级值使用存储格式存储；S2：针对每个分类标识栏内的数据再细分为数据包，将栏位中重复的一级值打包进行再存储为二级分类标识。本发明的有益效果是：解决了现有的计算机平台系统在处理数据时，提取漏掉的数据需要重新提取所有的数据的问题；提高了数据处理的速度及平台系统的可靠性；通过竖存储技术节省了存储空间。

技术领域

本发明涉及数据处理领域，尤其涉及一种新型的库结构数据处理方法。

背景技术

随着智慧中国战略的实施，大数据对于各行业影响深远。基于交易商细分和交易商精细化营销的需求已逐渐成为中药材市场变革的主要手段。目前针对大宗交易平台的数据管理和市场营销需求，通常由业务部门对各类经营指标进行分析，筛选出需要关注的业务指标，然后提交技术部门采集相关业务字段的具体清单，最后由技术部门依据业务部门所提的方案，对相关数据进行手工分析，输出结果。基于目前的数据分析流程，要经常应对下竖事件：

1、业务部门所提的需求多样，通常需要跨越多系统采集数据，才能够满足业务部门的分析需求；

2、针对多系统采集的数据，技术部门需要重新构建多系统关联的检索指标和属性后方可联机查询，输出业务部门需要的报表结果；

3、针对业务部门的大数据需求，技术部门需要将输出后的报表结果转化为直观图形予以体现。

现有技术中专利号：201610889114.5，公布了一种关系型数据库的数据集成结构，提供的一种关系型数据库的数据集成结构，实现了方便、快捷的从MySQL数据库到MySQL数据库、从Oracle数据库到MySQL数据库的数据集成减少了导入导出数据的工作量，使得数据同步工作更加简便、可控；专利号：201410818000.2，公布了一种数据库中的数据混合存储方法，为在复杂应用场景下的列存数据库提供了一种有效解决select*应用模型物化效率低下的方法，提高了列存数据库对于select*类型的查询效率，扩展了列存数据库的适用范围；减小了现有行列混合存储方式占用的空间，同时数据的压缩效率与列存储相差不多。现有技术对于关系型数据仍通过行存储存储数据并进行处理，仍需要跨越多系统进行采集，数据导入导出效率较低。

发明内容

本发明的目的是为了解决现有技术中存在的缺点，而提出的一种新型的库结构数据处理方法。

为了实现上述目的，本发明采用了如下技术方案：一种新型的库结构数据处理方法，包括竖结构数据库，竖结构数据库按照一个分类标识对应一个关键字的规则建立映射竖表，竖结构数据库的数据处理方法包括：

S1：对一级分类标识所对应的一级值使用存储格式存储；

S2：针对每个分类标识栏内的数据再细分为数据包，将栏位中重复的一级值打包进行再存储为二级分类标识。

优选的，存储格式通过关键字存储并设有存储位数限制。

优选的，存储位数限制为一个关键字。

优选的，分类标识包括多级分类标识，分级数为N级，N>1，依次为一级分类标识、二级分类标识…N级分类标识。

优选的，一级分类标识为预设标识，二级分类标识包含一级分类标识，三级分类标识包含二级分类标识…N级分类标识包含N-1级分类标识，N级分类标识包括N个关键字。

优选的，S2后还包括S3,S3：将二级分类标识所对应的二级值使用存储格式存储；针对每个分类标识栏内的数据再细分为数据包，将栏位中重复的二级值打包进行再存储为三级分类标识。