[发明专利]数据迁移的管理方法、装置、设备及存储介质

说明书

本发明实施例提供一种数据迁移的管理方法、装置、设备及存储介质。其中，一种数据迁移的管理方法，应用于数据迁移任务的管理平台，在获得数据迁移任务后，确定所述数据迁移任务对于待利用专线宽带在指定时刻的第一带宽占用量；其中，所述指定时刻属于所述数据迁移任务的最早启动时刻和最晚启动时刻之间的时间段；确定利用专线宽带的服务响应任务；预测所述服务响应任务对于所述专线宽带在所述指定时刻的带宽占用量，得到第二带宽占用量；当第一带宽占用量和第二带宽占用量的和值符合预定的所述专线宽带对应的流量控制条件时，在指定时刻停止执行所述数据迁移任务。本方案可以减少与数据迁移使用同一专线宽带的服务响应任务的执行异常。

技术领域

本发明涉及数据迁移技术领域，特别是涉及一种数据迁移的管理方法、装置、设备及存储介质。

背景技术

为了应对互联网服务的海量数据的特点，可以由存储集群存储数据，并由执行集群执行关于实现互联网服务的服务响应任务。在此基础上，如果执行集群在执行服务响应任务时需要使用存储集群所存储数据，那么，在任务执行之前，需要执行数据迁移任务。其中，所谓的数据迁移任务为：将存储集群所存储的数据迁移到执行集群的任务。

但是，发明人在实现本发明的过程中发现：

由于互联网服务的海量数据的特点，因此，在执行数据迁移任务时很可能需要迁移大量数据，从而占用大量带宽。那么，在数据迁移任务和服务响应任务共享同一专线宽带的场景下，容易造成数据迁移任务占用的专线宽带中，没有足够的可用带宽供服务响应任务占用，服务响应任务出现执行异常的问题。

发明内容

本发明实施例的目的在于提供一种数据迁移的管理方法、装置、设备及存储介质，以实现减少与数据迁移任务使用同一专线宽带的服务响应任务的执行异常的效果。具体技术方案如下：

第一方面，本发明实施例提供了一种数据迁移的管理方法，应用于数据迁移任务的管理平台，该方法包括：

在获得数据迁移任务后，确定所述数据迁移任务对于待利用专线宽带在指定时刻的第一带宽占用量；其中，所述指定时刻属于所述数据迁移任务的最早启动时刻和最晚启动时刻之间的时间段；

确定利用所述专线宽带的服务响应任务；

预测所述服务响应任务对于所述专线宽带在所述指定时刻的带宽占用量，得到第二带宽占用量；

当所述第一带宽占用量和所述第二带宽占用量的和值符合预定的所述专线宽带对应的流量控制条件时，在所述指定时刻停止执行所述数据迁移任务。

可选的，所述第一带宽占用量和所述第二带宽占用量的和值符合所述专线宽带对应的流量控制条件，包括：

所述第一带宽占用量和所述第二带宽占用量的和值，大于所述专线宽带对应的带宽安全阈值。

可选的，所述预测所述服务响应任务对于所述专线宽带在所述指定时刻的带宽占用量，得到第二带宽占用量，包括：

基于所述服务响应任务对于所述专线宽带在连续多个第一历史时刻的第一历史带宽占用量，利用预先训练得到的第一时序预测模型，对所述服务响应任务对于所述专线宽带在所述指定时刻的带宽占用量进行预测，得到第二带宽占用量；

其中，任一第一历史时刻在所述指定时刻之前，且相邻第一历史时刻间隔指定时间步长；

其中，所述第一时序预测模型为基于第一训练样本集训练得到、用于预测带宽占用量的模型，所述第一训练样本集中包括第一样本序列，所述第一样本序列中包括所述服务响应任务对于所述专用带宽在连续多个第一样本时刻的第一样本带宽占用量，相邻第一样本时刻间隔所述指定时间步长。

可选的，所述多个第一样本带宽占用量，采用如下步骤获得：