[发明专利]一种数据管理的方法及装置、数据库一体机在审
申请号: | 201611014621.0 | 申请日: | 2016-11-15 |
公开(公告)号: | CN108073636A | 公开(公告)日: | 2018-05-25 |
发明(设计)人: | 郭远胜 | 申请(专利权)人: | 中国移动通信集团公司;中国移动通信集团湖南有限公司 |
主分类号: | G06F17/30 | 分类号: | G06F17/30 |
代理公司: | 北京路浩知识产权代理有限公司 11002 | 代理人: | 李相雨 |
地址: | 100033 *** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 存储介质 热点数据 数据库 存储空间 读写 数据管理 存储 一体机 预设 数据存取过程 读取 命中率 占用 | ||
本发明的实施例公开了一种数据管理的方法及装置、数据库一体机,该方法包括获取预设数据库中存储在第一存储介质中的热点数据,以及所述热点数据占用的第一存储空间;判断所述预设数据库的第二存储介质中未被占用的第二存储空间是否大于或等于所述第一存储空间,若是,将所述热点数据存储至所述第二存储介质中;其中,所述第二存储介质在单位时间内的读写次数大于所述第一存储介质在单位时间内的读写次数。这种方法将热点数据转移到IOPS较高的第二存储介质中,以提高读取数据库中热点数据的速度。同时避免了存储在IOPS较低的第一存储介质中的热点数据的读写命中率低的问题,提高了数据存取过程效率。
技术领域
本发明数据库优化技术领域,尤其是涉及一种数据管理的方法及装置、数据库一体机。
背景技术
数据库一体机是为了适应不断复杂的数据系统和越发庞大的数据规模而产生的软硬件一体化产品,解决了数据库应用硬件选型、系统安装、数据库调优、系统维护等复杂问题。
数据库一体机的性能主要受限于存储系统的IOPS(Input/Output OperationsPer Second,每秒进行读写(I/O)操作的次数),和磁盘数据访问带宽。传统的数据库一体机采用SAS(Serial Attached SCSI)磁盘,由于SAS机械磁盘访问速度较慢,在数据库一体机运行的过程中大量时间用于等待数据的传输,造成系统整体的数据处理能力较低。针对数据库一体机数据传输速度慢的问题,通常采用PCIE SSD(PCI-Express,最新的总线和接口标准)存储卡来解决。然而,由于PCIE SSD存储卡容量有限,完全使用PCIE SSD存储卡进行数据的存储,无法满足大容量的数据应用,其次,由于PCIE SSD存储卡的成本较高,PCIESSD存储卡的使用使得数据库一体机的成本增加。
现有技术中存在使用PCIE SSD存储卡和SAS机械磁盘组合进行数据存储和读取的数据库一体机,其将经常读写的数据放置在PCIE SSD存储卡中,其余数据放置在SAS机械磁盘中。由于数据内容存放位置预先固定,因此无法感知数据访问内容的变化,当数据热点变化时,系统无法自动判断,造成数据读写命中率较低,严重影响数据库一体机的性能。
在实现本发明实施例的过程中,发明人发现现有的使用PCIE SSD存储卡和SAS机械磁盘组合进行数据存储和读取的数据库一体机,存取速度慢、数据读写命中率较低,性能差。
发明内容
本发明所要解决的技术问题是如何解决由PCIE SSD存储卡和SAS机械磁盘组合进行数据存储和读取的数据库一体机中,存取速度慢、数据读写命中率较低,性能差的问题。
针对以上技术问题,本发明的实施例提供了一种数据管理的方法,包括:
获取预设数据库中存储在第一存储介质中的热点数据,以及所述热点数据占用的第一存储空间;
判断所述预设数据库的第二存储介质中未被占用的第二存储空间是否大于或等于所述第一存储空间,若是,将所述热点数据存储至所述第二存储介质中;
其中,所述第二存储介质在单位时间内的读写次数大于所述第一存储介质在单位时间内的读写次数。
可选地,还包括:
若判断获知所述第二存储空间小于所述第一存储空间,则获取存储所述第二存储介质中访问频率低于第一阈值的非热点数据,将所述非热点数据存储至所述第一存储介质中后,清空所述非热点数据在所述第二存储介质中的存储空间,直到所述第二存储空间大于或等于所述第一存储空间后,将所述热点数据存储至所述第二存储介质中。
可选地,还包括:
在向所述预设数据库中添加新数据时,若所述新数据的数据类型为索引文件,则将所述新数据存储至所述第二存储介质中。
可选地,所述热点数据为在访问频率高于第二阈值的数据。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中国移动通信集团公司;中国移动通信集团湖南有限公司,未经中国移动通信集团公司;中国移动通信集团湖南有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201611014621.0/2.html,转载请声明来源钻瓜专利网。
- 上一篇:一种地图渲染方法及装置
- 下一篇:一种建立鲆鲽鱼类经济性状信息数据库的方法