[发明专利]一种基于混合存储的计算系统中的数据迁移方法及装置

说明书

本发明实施例提供了一种基于混合存储的计算系统中的数据迁移方法及装置，应用于配置有存储设备的计算节点，所述配置有存储设备的计算节点包括硬盘驱动器HDD和固态驱动器SSD，方法包括：在HDD存储的视频任务中，确定待迁移任务，其中，SSD的剩余存储空间大于处理待迁移任务时所需的存储空间，待迁移任务包括至少一个待迁移数据块；判断待迁移任务的预设的迁移时长是否小于预设的迁移时长阈值；若为是，将待迁移任务从HDD迁移至SSD，使待迁移任务存储在SSD中。应用本发明实施例能够实现配置有存储设备的计算节点的负载均衡。

技术领域

本发明涉及数据存储技术领域，特别是涉及一种基于混合存储的计算系统中的数据迁移方法及装置。

背景技术

随着云技术的快速发展，硬盘驱动器(Hard Disk Drive，HDD)+固态驱动器(Solid-State Drive，SSD)的混合存储方案已经成为云平台数据存储器的主流解决方案。在云平台中，一个数据存储器，也即一个配置有存储设备的计算节点通常包括一定数量的SSD和一定数量的HDD，由于SSD的平均读写速率等指标均优于HDD，因此，当每个配置有存储设备的计算节点中包括的HDD和SSD的数量比例不完全相同时，易造成配置有存储设备的计算节点之间的负载量不均衡。

目前，HDFS分布式文件系统能够根据配置有存储设备的计算节点的负载量，对配置有存储设备的计算节点中的待处理数据进行迁移处理，具体的，可以将负载量较大的配置有存储设备的计算节点中的待处理数据迁移到负载量较小的配置有存储设备的计算节点中。

但是，由于HDFS仅考虑了配置有存储设备的计算节点的负载量，没有考虑到HDD与SSD之间的性能差异，因此，HDFS对配置有存储设备的计算节点的负载均衡的调节效果不佳，导致SSD的存储空间无法得到充分利用，降低了云平台的处理性能。

发明内容

本发明实施例的目的在于提供一种基于混合存储的计算系统中的数据迁移方法及装置，能够实现配置有存储设备的计算节点的负载均衡。具体技术方案如下：

本发明实施例提出了一种基于混合存储的计算系统中的数据迁移方法，应用于配置有存储设备的计算节点，所述计算节点包括硬盘驱动器HDD和固态驱动器SSD，所述方法包括：在所述HDD存储的视频任务中，确定待迁移任务，其中，所述SSD的剩余存储空间大于处理所述待迁移任务时所需的存储空间，所述待迁移任务包括至少一个待迁移数据块；判断所述待迁移任务的预设的迁移时长是否小于预设的迁移时长阈值；若为是，则将所述待迁移任务从所述HDD迁移至所述SSD，使所述待迁移任务存储在所述SSD中。

本发明实施例还提出了一种基于混合存储的计算系统中的数据迁移装置，所述装置包括：确定单元，用于在所述HDD存储的视频任务中，确定待迁移任务，其中，所述SSD的剩余存储空间大于处理所述待迁移任务时所需的存储空间，所述待迁移任务包括至少一个待迁移数据块；判断单元，用于判断所述待迁移任务的预设的迁移时长是否小于预设的迁移时长阈值；迁移单元，用于若所述判断单元的结果为所述待迁移任务的预设的迁移时长小于预设的迁移时长阈值，则将所述待迁移任务从所述HDD迁移至所述SSD，使所述待迁移任务存储在所述SSD中。

本发明实施例又提出了一种电子设备，包括处理器、通信接口、存储器和通信总线，其中，处理器，通信接口，存储器通过通信总线完成相互间的通信；存储器，用于存放计算机程序；处理器，用于执行存储器上所存放的程序时，实现如下步骤：在所述HDD存储的视频任务中，确定待迁移任务，其中，所述SSD的剩余存储空间大于处理所述待迁移任务时所需的存储空间，所述待迁移任务包括至少一个待迁移数据块；判断所述待迁移任务的预设的迁移时长是否小于预设的迁移时长阈值；若为是，则将所述待迁移任务从所述HDD迁移至所述SSD，使所述待迁移任务存储在所述SSD中。