[发明专利]一种分区分片高QPS数据持久化方法有效
申请号: | 201610682446.6 | 申请日: | 2016-08-17 |
公开(公告)号: | CN106294828B | 公开(公告)日: | 2019-05-21 |
发明(设计)人: | 柳志刚 | 申请(专利权)人: | 华云科技有限公司 |
主分类号: | G06F16/21 | 分类号: | G06F16/21 |
代理公司: | 暂无信息 | 代理人: | 暂无信息 |
地址: | 523808 广东省东莞市松山*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明涉及软件开发技术领域,具体涉及一种分区分片高QPS数据持久化方法,其特征在于:它采用如下的方法步骤:步骤一:将系统数据保存处理根据数据产生的时间进行周期性地进行分片处理,每个特定时间产生的数据只能在对应时间片数据库中进行业务逻辑处理;步骤二:步骤一中所述的业务逻辑处理过程分为三个核心阶段:三个核心阶段是保存阶段、转存到其它持久化系统阶段、清理当前时间片积累数据阶段;它具有流程简易,能够解决除数据与时间有关外的,与系统其它需求无关,在系统长期运行中,保持高QPS持久化数据到数据库,提高其工作效率等优点。 | ||
搜索关键词: | 分区 分片 qps 数据 持久 方案 | ||
【主权项】:
1.一种分区分片高QPS数据持久化方法,其特征在于:它采用如下的方法步骤:步骤一:将系统数据保存处理根据数据产生的时间进行周期性地进行分片处理,每个特定时间产生的数据只能在对应时间片数据库中进行业务逻辑处理;步骤二:步骤一中所述的业务逻辑处理过程分为三个核心阶段:三个核心阶段是保存阶段、转存到其它持久化系统阶段、清理当前时间片积累数据阶段;所述保存阶段分为二个子阶段即时保存阶段和延时等待保存阶段;针对数据的业务逻辑处理,最终系统分时分片周期为四个执行阶段:即时保存阶段、延时等待保存阶段、转存其它持久化系统阶段、清理当前时间片积累数据阶段;这四个执行阶段是周期发生的,当一个周期完成后自动进行下一个周期处理过程;步骤三:将系统数据库分为四个区域,这四个区域有相同数据库结构,只是数据库名不同,四个区域分别运行在四个时间片状态:即时分片数据库、延时等待分片数据库、转存分片数据库、清理及待用空数据库;四个时间片状态的时间长度都是相等的,在长时间运行过程中,四个时间片分区数据库任何一个都是在这四个状态间按状态顺序周而复始地进行自动切换;步骤四:将步骤二中的四个执行阶段:即时保存阶段、延时等待保存阶段、转存其它持久化系统阶段、清理当前时间片积累数据阶段;与步骤三中的系统数据库分为四个区域:即时分片数据库、延时等待分片数据库、转存分片数据库、清理及待用空数据库,分别进行绑定,形成四个处理单元,保证每个处理单元的封闭性,唯一性,相互不干扰;步骤二中所述的即时保存阶段:运行状态为当前数据库是新建的空数据库,没有任何记录;只保存数据产生时间在即时保存阶段的时间范围的数据;数据保存到即时分片数据库中;步骤二中的延时等待保存阶段:是即时保存阶段的延续;当系统时间超过即时保存阶段的最后时间范围后,即时分片数据库自动转换为延时等待分片数据库状态;只保存数据产生时间在延时等待保存阶段的时间范围的数据;数据保存到延时等待分片数据库中;步骤二中的转存其它持久化系统阶段:是延时等待保存阶段的后处理过程,系统将自动调用数据转存的个性化处理实现,将延时等待分片数据库中的数据转存到系统个性化指定的位置;个性化处理实现由实际系统单独处理;步骤二中的清理积累数据阶段:是转存其它持久化系统阶段的后处理过程;系统将自动调用按标准化格式定义数据库清理处理脚本,先清理全部数据库实例;再调用数据库创建处理脚本创建一个空数据库;清理积累数据阶段完成后的空数据库自动为下一个周期的即时保存阶段准备了所需的空数据库,即一个全新的、可用的即时分片数据库。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于华云科技有限公司,未经华云科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201610682446.6/,转载请声明来源钻瓜专利网。
- 上一篇:手表
- 下一篇:平板电脑型汽车故障检测仪
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置