[发明专利]数据写入处理方法、装置及电子设备

说明书

本申请涉及一种数据写入处理方法、装置及电子设备，其中，方法包括：获取待写入数据，根据待写入数据的大小和/或优先级，分配磁盘数据块空间；向分配的磁盘数据块空间中写入待写入数据；更新内存中与该待写入数据对应的元数据；以预设的更新策略，将内存中的元数据更新到磁盘中。本发明实施例中，在确保数据高效写入磁盘的前提下，通过以一定的时间间隔来集中更新磁盘中的元数据，从而减少了在数据写入过程中，对于磁盘的IO访问次数，有效的提高了磁盘数据的写入效率。

技术领域

本申请涉及一种数据写入处理方法、装置及电子设备，属于计算机技术领域。

背景技术

随着云原生应用对可迁移性、扩展性和动态特性的需求，对云原生存储也带来了相应的密度、速度、混合度的要求。在云原生场景下，强依赖于支持POSIX(PortableOperating System Interface，可移植操作系统接口)语义的文件系统的应用(例如MySQL)，对于文件系统的弹性部署和性能需求也会变得更加重要。在基于POSIX标准的文件存储处理中，需要对文件系统对POSIX语义的支持，而POSIX语义在性能上并不适合分布式系统，因此，目前很多会采用本地文件系统来实现基于POSIX标准的文件存储处理。

传统本地文件系统，如ext4和xfs，均采用journal机制，在这种机制下，每次IO所需要的更新数据和元数据，当面对大量数据的存储处理时，会带来严重的写入放大问题，使文件系统的性能严重降低，不利于云原生存储的应用场景。

发明内容

本发明实施例提供一种数据写入处理方法、装置及电子设备，以提高向磁盘写入数据的效率。

为了实现上述目的，本发明实施例提供了一种数据写入处理方法，包括：

获取待写入数据，根据所述待写入数据的大小和/或优先级，分配磁盘数据块空间；

向分配的磁盘数据块空间中写入所述待写入数据；

更新内存中与该待写入数据对应的元数据；

以预设的更新策略，将所述内存中的元数据更新到所述磁盘中。

本发明实施例还提供了一种数据写入处理装置，包括：

数据块空间分配模块，用于获取待写入数据，根据所述待写入数据的大小和/或优先级，分配磁盘数据块空间；

磁盘数据写入模块，用于向分配的磁盘数据块空间中写入所述待写入数据；

内存元数据更新模块，用于更新内存中与该待写入数据对应的元数据；

磁盘元数据更新模块，用于以预设的更新策略，将所述内存中的元数据更新到所述磁盘中。

本发明实施例还提供了一种电子设备，包括：

存储器，用于存储程序；

处理器，用于运行所述存储器中存储的所述程序，以执行前述的数据写入处理方法。

本发明实施例的数据写入处理方法、装置及电子设备，在确保数据高效写入磁盘的前提下，通过以一定的时间间隔来集中更新磁盘中的元数据，从而减少了在数据写入过程中，对于磁盘的IO访问次数，有效的提高了磁盘数据的写入效率。

上述说明仅是本发明技术方案的概述，为了能够更清楚了解本发明的技术手段，而可依照说明书的内容予以实施，并且为了让本发明的上述和其它目的、特征和优点能够更明显易懂，以下特举本发明的具体实施方式。

附图说明

图1为本发明实施例的本地文件系统的数据存储结构示意图；

图2为本发明实施例的本地文件系统的数据写入原理示意图；

图3为本发明实施例的数据写入处理方法的流程示意图；