[发明专利]数据处理方法、装置、设备、存储介质及计算机程序产品

说明书

本公开提供一种数据处理方法、装置、设备、存储介质及计算机程序产品。接收第一虚拟容器对象组件发送的针对存储系统的磁盘挂载请求；存储系统包括：用于存储数据量小于预设阈值的数据且可进行并行写操作和并行读操作的第一磁盘、用于存储数据量大于预设阈值的数据且可进行除并行写操作之外的其它读写操作的第二磁盘，用于存储数据量大于预设阈值的数据且只进行读操作的第三磁盘；从磁盘挂载请求中获取目标磁盘的信息和目标挂载模式；按照目标挂载模式，将目标磁盘和第一虚拟容器对象组件挂载，以使第一虚拟容器对象组件基于目标磁盘对目标数据进行处理。本公开根据各磁盘自身特点进行数据存储，提高了数据读写速度，进而提高了数据处理整体效率。

技术领域

本发明涉及计算机技术领域，尤其涉及数据处理方法、装置、设备、存储介质及计算机程序产品。

背景技术

pod（一种虚拟容器对象组件）作为kubernetes集群（为容器服务而生的一个可移植容器的编排管理工具）创建或部署的最小单位，一个pod即代表集群中正在运行的一个进程，其中包括一个或多个容器。由于pod具有进程隔离以及便于扩容的优势，因此，通常采用pod进行数据处理。例如：用户可以通过启动pod来进行机器学习模型的训练等。

当待处理数据种类及数据量较多时，如何进行数据处理，以提升数据处理效率，是一个亟需解决的问题。

发明内容

根据本公开的第一方面，提供了一种数据处理方法，包括：

接收第一虚拟容器对象组件发送的针对存储系统的磁盘挂载请求；所述存储系统包括：用于存储数据量小于预设阈值的数据且可进行并行写操作和并行读操作的第一磁盘、用于存储数据量大于所述预设阈值的数据且可进行除并行写操作之外的其它读写操作的第二磁盘，用于存储数据量大于所述预设阈值的数据且只进行读操作的第三磁盘；

从所述磁盘挂载请求中获取目标磁盘的信息和目标挂载模式，其中，所述目标磁盘为根据所述第一虚拟容器对象组件针对的目标数据的处理类型以及所述目标数据的数据量确定的磁盘；

按照所述目标挂载模式，将所述目标磁盘和所述第一虚拟容器对象组件挂载，以使所述第一虚拟容器对象组件基于所述目标磁盘对所述目标数据进行处理。

根据本公开的第二方面，提供了一种数据处理装置，包括：

磁盘挂载请求接收模块，用于接收第一虚拟容器对象组件发送的针对存储系统的磁盘挂载请求；所述存储系统包括：用于存储数据量小于预设阈值的数据且可进行并行写操作和并行读操作的第一磁盘、用于存储数据量大于所述预设阈值的数据且可进行除并行写操作之外的其它读写操作的第二磁盘，用于存储数据量大于所述预设阈值的数据且只进行读操作的第三磁盘；

信息获取模块，用于从所述磁盘挂载请求中获取目标磁盘的信息和目标挂载模式，其中，所述目标磁盘为根据所述第一虚拟容器对象组件针对的目标数据的处理类型以及所述目标数据的数据量确定的磁盘；

磁盘挂载模块，用于按照所述目标挂载模式，将所述目标磁盘和所述第一虚拟容器对象组件挂载，以使所述第一虚拟容器对象组件基于所述目标磁盘对所述目标数据进行处理。

根据本公开的第三方面，提供了一种电子设备，包括：

处理器；以及

存储程序的存储器，

其中，所述程序包括指令，所述指令在由所述处理器执行时使所述处理器执行上述第一方面所述的方法。

根据本公开的第三方面，提供了一种存储有计算机指令的非瞬时计算机可读存储介质，其中，所述计算机指令用于使所述计算机执行上述第一方面所述的方法。

根据本公开的第四方面，提供了一种计算机程序产品，包括计算机程序，其中，所述计算机程序在被处理器执行时实现上述第一方面所述的方法。