[发明专利]一种数据分类存储方法、系统、终端及存储介质有效
申请号: | 202011465093.7 | 申请日: | 2020-12-14 |
公开(公告)号: | CN112463074B | 公开(公告)日: | 2023-01-10 |
发明(设计)人: | 刘宾 | 申请(专利权)人: | 苏州浪潮智能科技有限公司 |
主分类号: | G06F3/06 | 分类号: | G06F3/06 |
代理公司: | 济南舜源专利事务所有限公司 37205 | 代理人: | 孙玉营 |
地址: | 215100 江苏省苏州市吴*** | 国省代码: | 江苏;32 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 数据 分类 存储 方法 系统 终端 介质 | ||
本发明提供一种数据分类存储方法、系统、终端及存储介质,包括:将数据按访问频率大小划分为多种数据种类,并设置各数据种类对应的存储介质类型;利用质心距离计算方法获取待存储数据所属的实际数据种类;根据所述待存储数据的实际数据种类,将所述待存储数据保存至类型与所述实际数据种类对应的存储介质中。本发明充分利用存储设备的特性,并将数据通过算法进行区分。使对应的数据存储在对应的存储设备之中。在整体过程中,提高了数据存储能力。
技术领域
本发明涉及服务器技术领域,具体涉及一种数据分类存储方法、系统、终端及存储介质。
背景技术
随着人工智能与大数据产业的不断发展,数据存储量也大量增加。常用的存储介质有内存、非易失性内存、固态硬盘和机械硬盘。内存是计算机中重要的部件之一,它是外存与CPU进行沟通的桥梁。计算机中所有程序的运行都是在内存中进行的,因此内存的性能对计算机的影响非常大。内存(Memory)也被称为内存储器和主存储器,其作用是用于暂时存放CPU中的运算数据,以及与硬盘等外部存储器交换的数据。只要计算机在运行中,操作系统就会把需要运算的数据从内存调到CPU中进行运算,当运算完成后CPU再将结果传送出来,内存的运行也决定了计算机的稳定运行。内存条是由内存芯片、电路板、金手指等部分组成的。
非易失性内存,具有非易失、按字节存取、存储密度高、低能耗、读写性能接近DRAM,但读写速度不对称,读远快于写,寿命有限。当电流关掉后,所存储的数据不会消失的计算机存储器
机械硬盘(HDD)是传统硬盘,工作时,磁头悬浮在高速旋转的碟片上进行读写数据。机械硬盘是集精密机械、微电子电路、电磁转换为一体的电脑存储设备。
固态硬盘(SSD)是由多个闪存芯片加主控以及缓存组成的阵列式存储,属于以固态电子存储芯片阵列制成的硬盘。相对机械硬盘,读取速度更快,寻道时间更小,可加快操作系统启动速度和软件启动速度。
傲腾内存。习惯上大家叫aep,实际上这个称呼并不十分正确,正确的叫法应该是:DCPM或傲腾DCPM,全称是:optane DC(data center)persistent memory,而aep(Apachepass)是指基于3D xpoint的持久化内存,并不完全等同于DCPM。Memory Mode:需要大容量内存、不需要更改应用的场景。
现有数据分类存储方法不区分数据访问频率,顺序存储,或者区分冷热数据,但只有存储在SSD和HDD的区别。
现有数据分类存储方法存在以下缺点:若顺序存储,则不常用的数据可能储存在存储性能较好的设备中,而常用的数据存储在存储性能较差的设备中;不常用的数据和常用的数据均存储在存储性能较好的设备,但造成了随机读写,因此造成性能较低。若只有存储在SSD和HDD的区别,区分力度较小,并且没有较为统一的方式方法,未考虑顺序读写与随机读写。
发明内容
针对现有技术的上述不足,本发明提供一种数据分类存储方法、系统、终端及存储介质,以解决上述技术问题。
第一方面,本发明提供一种数据分类存储方法,包括:
将数据按访问频率大小划分为多种数据种类,并设置各数据种类对应的存储介质类型;
利用质心距离计算方法获取待存储数据所属的实际数据种类;
根据所述待存储数据的实际数据种类,将所述待存储数据保存至类型与所述实际数据种类对应的存储介质中。
进一步的,所述将数据按访问频率大小划分为多种数据种类并设置各数据种类对应的存储介质类型,包括:
设置目标分类种类,所述目标分类种类包括极热数据、热数据、高温数据、中温数据、低温数据、冷数据、极冷数据;
预先准备包括各种数据种类的频率数据集合;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于苏州浪潮智能科技有限公司,未经苏州浪潮智能科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202011465093.7/2.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置