[发明专利]一种Ceph文件系统的数据存储方法及装置

说明书

技术领域

本发明涉及文件系统存储领域，特别是涉及一种Ceph文件系统的数据存储方法及装置。

背景技术

Ceph文件系统由于其强大的功能成为当下最流行且最优发展前景的文件系统，Ceph文件系统的底层采用Filestore的存储方式，默认每次都以4MB大小的数据块的形式将数据存储到磁盘中。

目前的写入方式按照速度分为高速写入和低速写入。当高速写入时，数据块中的数据会在极短的时间内达到4MB，从而完成一次刷新，由此可见，在这种方式下，相邻两次的刷新时间间隔较短，能够满足实际的需求。但是，当低速写入时，写入数据块的速度较慢，在短时间内数据块中的数据无法达到4MB，为了不影响磁盘更新的速度，会在规定时间内刷新一次，以此来提高刷新的速度。而在Filestore的存储方式下，当数据块中的数据量很少时，会先从磁盘中读取出数据并写入数据块，与数据块中原有数据进行合并，以写满4MB大小的数据块。因此，虽然设置刷新的时间可以提高刷新的速度，但是，当到达刷新时间时，数据块中的数据量还较少，无法达到4MB，甚至只能有很少的数据能被写入数据块中，则只能将磁盘中的数据读出，然后合并之后再写入磁盘。很显然，在该方式下，会导致磁盘中已存的数据会被反复读取，造成写放大现象，即实际写入的数据量是理论数据量的多倍，直接导致磁盘的压力过大，进而影响Ceph文件系统在工作时的性能。

可见，如何降低磁盘的工作压力并提高系统的数据存储效率进而提升系统的工作性能，是本领域技术人员亟待解决的问题。

发明内容

本发明的目的是提供一种Ceph文件系统的数据存储方法及装置，降低了磁盘的工作压力并提高系统的数据存储效率。

为解决上述技术问题，本发明提供一种Ceph文件系统的数据存储方法，包括：

接收客户端写入的数据，并将数据写入数据块；

判断数据块中的数据的总量是否达到阈值；

如果是，则将数据块中的数据存储至磁盘。

优选的，该方法进一步包括：

判断Ceph文件系统的当前运行状态是否满足将数据块中的数据存储至磁盘的触发条件；

如果是，则将数据块中的数据存储至磁盘。

优选的，触发条件具体包括：

相邻两次将数据写入数据块的时间间隔达到规定时间、系统调用fsync接口、另一客户端访问数据和/或数据不连续。

优选的，该方法进一步包括：

在将数据块中的数据存储至磁盘后，将当前时刻清零；

其中，触发条件为相邻两次将数据写入数据块的时间间隔达到规定时间。

优选的，当将当前时刻清零时，该方法进一步包括：

记录每一次将数据块中的数据存储至磁盘的时刻。

优选的，规定时间具体根据数据写入数据块的速率确定。

优选的，阈值具体为数据块可写入数据的总量。

此外，本发明还提供一种Ceph文件系统的数据存储装置，包括：

写入模块，用于接收客户端写入的数据，并将数据写入数据块；

总量判断模块，用于判断数据块中的数据的总量是否达到阈值，如果是，则调用存储模块；

存储模块，用于将数据块中的数据存储至磁盘。

优选的，该装置进一步包括：

条件判断模块，用于判断Ceph文件系统的当前运行状态是否满足将数据块中的数据存储至磁盘的触发条件，如果是，则调用存储模块。

优选的，阈值具体为数据块可写入数据的总量。

本发明所提供的Ceph文件系统的数据存储方法，当数据块中写入数据的总量达到阈值要求后，才会将数据块中的数据存储至磁盘中。因此，该方法可以将阈值设置的较高，则相邻两次的刷新时间就会较长，相当于对现有技术中的刷新时间进行了延迟，因此，能够避免因为数据块中数据过少而从磁盘中读取大量已有数据后再存储回磁盘中的情况，这就能够相应的减轻磁盘的工作压力，进而提升系统的工作性能。由于能保证数据块中有固定的空间会被用于存储新数据，所以每一个数据块所承载的新数据的量均有所增加，这也进一步提高了每一次进行数据存储的效率。此外，本发明还提供一种Ceph文件系统的数据存储装置，有益效果如上所述。

附图说明

为了更清楚地说明本发明实施例，下面将对实施例中所需要使用的附图做简单的介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。