[发明专利]一种MySQL数据库数据存储方法、装置和电子设备在审
申请号: | 202111578489.7 | 申请日: | 2021-12-22 |
公开(公告)号: | CN114461635A | 公开(公告)日: | 2022-05-10 |
发明(设计)人: | 周国剑;苏飞;曾令江;唐钰杰;蒋伟 | 申请(专利权)人: | 天翼云科技有限公司 |
主分类号: | G06F16/22 | 分类号: | G06F16/22;G06F3/06 |
代理公司: | 暂无信息 | 代理人: | 暂无信息 |
地址: | 100007 北京市东城区青*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 mysql 数据库 数据 存储 方法 装置 电子设备 | ||
本发明公开了一种MySQL数据库数据存储方法、装置和电子设备,该方法包括:将需要写入MySQL数据库的目标数据基于预设顺序写入内存中的跳跃表;当跳跃表的数据量达到预设阈值时,将跳跃表转换为只读跳跃表,并在内存中创建新的跳跃表以接收新的目标数据;将只读跳跃表转换为存储文件存入MySQL数据库所在的磁盘。本发明提供的技术方案,提高了数据库写入数据的速率。
技术领域
本发明涉及算法设计领域,具体涉及一种MySQL数据库数据存储方法、 装置和电子设备。
背景技术
MySQL数据库在开源数据库的浪潮之中蓬勃发展,逐渐成为了开源数 据库的优秀代表,越来越多的厂商使用MySQL数据库处理自身的业务数据。 MySQL作为一个典型的OLTP数据库,也存在着OLTP系统的一些问题, OLTP系统的数据块变化十分频繁,导致其磁盘子系统极易成为整个数据库 系统中的性能瓶颈,这个问题在使用机械硬盘的时候尤为突出。MySQL默 认存储引擎为是基于B+树的,其写入方式是随机写,磁盘的磁头需要经常 更换磁道,从而在输入的数据量很大时导致数据写入速率低,因此如何提 高数据库写入数据的速率是亟待解决的问题。
发明内容
有鉴于此,本发明实施方式提供了一种MySQL数据库数据存储方法、 装置和电子设备,从而提高了数据库写入数据的速率。
根据第一方面,本发明提供了一种MySQL数据库数据存储方法,所述 方法包括:将需要写入所述MySQL数据库的目标数据基于预设顺序写入内 存中的跳跃表;当所述跳跃表的数据量达到预设阈值时,将所述跳跃表转 换为只读跳跃表,并在内存中创建新的跳跃表以接收新的目标数据;将所 述只读跳跃表转换为存储文件存入所述MySQL数据库所在的磁盘。
可选地,所述方法还包括:将所述MySQL数据库所在的磁盘划分为多 级存储空间,其中下一级存储空间的空间容量是上一级存储空间的空间容 量的预设倍数,每级存储空间用于存储多个用于记录数据的存储文件,所 述存储文件存入所述MySQL数据库时从空间容量最小的存储空间开始进 行存储;若当前存储文件存入所述当前存储空间会使所述当前存储空间的 文件总量超过所述当前存储空间的空间容量,则将所述当前存储空间内的部分存储文件转移至下一级存储空间;利用所述当前存储文件覆盖所述当 前存储空间内的所述部分存储文件;将所述部分存储文件与第二存储文件 根据文件中数据的来源在所述下一级存储空间内进行文件合并,所述第二 存储文件是所述下一级存储空间中原有的存储文件。
可选地,所述目标数据是基于键值对的形式进行存储,所述将所述部 分存储文件与第二存储文件根据文件中数据的来源进行文件合并,包括: 根据所述部分存储文件与所述第二存储文件中数据的数据键对所述部分存 储文件与所述第二存储文件进行合并。
可选地,所述存储文件具有表征存储时间顺序的标记。
可选地,当对所述MySQL数据库中的数据进行修改或删除时,所述方 法还包括:将需要修改的数据写入内存中的跳跃表;将需要删除的数据添 加预设标记写入内存中的跳跃表。
可选地,所述方法还包括:在从所述MySQL数据库中读取目标数据时, 通过布隆过滤器判断所述目标数据是否存在于所述MySQL数据库中;若存 在,则从跳跃表中查找所述目标数据;若所述跳跃表中不存在所述目标数 据,则从只读跳跃表中查找所述目标数据;若所述只读跳跃表中不存在所 述目标数据,则从距离当前时间最近的存储文件开始,遍历查找所述目标 数据。
可选地,所述方法还包括:监控各个存储文件的读操作频率,并将读 操作频率超过预设阈值的存储文件加载到内存中。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于天翼云科技有限公司,未经天翼云科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202111578489.7/2.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置