[发明专利]数据存储方法、装置、全闪设备以及计算机可读存储介质

说明书

本发明提供一种数据存储方法，用于全闪设备中，所述全闪设备包括持久内存、易失内存和硬盘，该方法包括获取待处理元数据的数据量；当所述数据量小于等于第一预设阈值时，启动所述易失内存存储所述待处理元数据；当所述数据量大于第一预设阈值小于等于第二预设阈值时，同时启动所述持久内存和易失内存存储所述待处理元数据；当所述数据量大于所述第二预设阈值时，同时启动所述持久内存、易失内存和硬盘存储所述元数据。充分利用三种存储方式的特点，优先采用易失内存，当需要处理的元数据量达到一定程度时，同时使用易失内存和持久内存，利用大容量的硬盘，作为方案的补充，实现大容量元数据存储与使用效率兼顾的效果。

技术领域

本发明涉及存储技术领域，具体涉及一种数据存储方法、装置、全闪设备以及计算机可读存储介质。

背景技术

随着信息技术的广泛应用，存储技术也不断发展。目前，全闪存储产品的应用日益广泛，相比于传统的存储产品，在全闪存储的软件架构设计中会使用大量的元数据(Metadata)。元数据是描述信息资源或数据等对象的数据，通常在存储业务中会利用内存进行元数据的存储，由于全闪存储产品中元数据的使用大大增加，带来的问题也就显现出来。

存储设备中的内存容量是有限的，而对于全闪存储产品来说，元数据的数据量增加后，内存空间的分配变得相对困难，一般存储设备中内存可能无法满足当前软件设计的需求。目前，一种解决方案是根据元数据内存需求增加存储设备内存大小，但是受制于内存相关技术的发展以及内存较为高昂的价格，采用这种方式带来的弊端也十分明显，即内存空间增加有限的情况下，同时大大增加了设备的成本。

发明内容

有鉴于此，本发明实施例提供了一种数据存储方法、装置、全闪设备以及存储介质，以解决现有技术中全闪设备的内存空间不足、成本较高的问题。

根据第一方面，本发明实施例提供了一种数据存储方法，用于全闪设备中，所述全闪设备包括持久内存、易失内存和硬盘，所述持久内存的容量大于所述易失内存的容量；该方法包括：获取待处理元数据的数据量；当所述数据量小于等于第一预设阈值时，启动所述易失内存存储所述待处理元数据；当所述数据量大于第一预设阈值小于等于第二预设阈值时，同时启动所述持久内存和易失内存存储所述待处理元数据；当所述数据量大于所述第二预设阈值时，同时启动所述持久内存、易失内存和硬盘存储所述元数据。

本实施例中的数据存储方法，在全闪设备的存储架构中，分别设置持久内存、易失内存和硬盘，充分利用三种存储方式的特点，对于较少的元数据需要处理时，优先采用易失内存，以保证存储运行效率；当需要处理的元数据量达到一定程度时，只使用易失内存占用率太高或者不足时，同时使用易失内存和持久内存，利用持久内存大容量及传输速度相对快速的特性，更高效完成元数据的处理流程，使得元数据在能够处理的前提下，兼顾处理效率。当元数据处理量达到更高值时，充分调度持久内存、易失内存和硬盘存储，利用大容量的硬盘，作为方案的补充，实现了海量数据的存储，本方案通过增加容量判断机制与元数据保存的流程，实现大容量元数据存储与使用效率兼顾的效果。

结合第一方面，在第一方面的可选实施方式中，所述第一预设阈值设置为所述易失内存容量的60％-80％。

将第一预设阈值设置为所述易失内存容量的60％-80％，在保证数据通过易失内存高效存储的同时，保障易失内存的占用率，当数据量太大时，启动易失内存和持久内存共同开启的方式。

结合第一方面，在第一方面的可选实施方式中，所述第二预设阈值设置为所述持久内存容量的60％-80％。此时，需要处理的元数据量已经很大，持久内存和易失内存已经使用率较高，会影响处理效率，此时启动易失内存、持久内存和后端的硬盘，共同启动进行数据存储，作为海量数据处理时的备选方案，保证数据处理的同时兼顾效率。