[发明专利]混合重复数据删除调度方法及系统

权利要求书

1.一种混合重复数据删除调度方法，其特征在于，所述方法包括：

获取IO请求的请求指令；

基于所述请求指令确定调度业务类型，所述调度业务类型包括：

时延敏感型和带宽敏感型；

获取实时IO路径的运行参数，所述实时IO路径的运行参数包括：

存储节点的CPU利用率、网络带宽利用率、存储节点的存储空间使用率、当前业务IO数据的重删率；

根据所述实时IO路径的运行参数和所述调度业务类型，选择重复数据删除调度方案；至少包括：

若确定调度业务类型为带宽敏感型，所述请求指令表示IO请求为大块IO请求，将当前存储节点的存储空间使用率与预设使用率阈值进行对比：

若当前存储节点的存储空间使用率大于预设使用率阈值，选择重复数据删除调度方案为：执行在线重复数据删除；

若当前存储节点的存储空间使用率小于等于预设使用率阈值，则分别计算重删开销和网络传输开销；其中，所述重删开销的计算规则为：重删开销=指纹hash计算时延+指纹读取时延+指纹比较时延；所述网络传输开销的计算规则为：网络传输开销=存储节点接收到IO的时间-IO提交到网络的时间；

将当前的重删开销与当前的网络传输开销进行对比：

若当前的重删开销小于等于当前的网络传输开销，选择重复数据删除调度方案为：执行在线重复数据删除；

若当前的重删开销大于当前的网络传输开销，选择重复数据删除调度方案为：执行离线重复数据删除；

基于所述重复数据删除调度方案执行重复数据删除。

2.根据权利要求1所述的方法，其特征在于，所述基于所述请求指令确定调度业务类型，包括：

若所述请求指令表示IO请求为小块单深度IO请求，确定调度业务类型为时延敏感型；

若所述请求指令表示IO请求为非小块单深度IO请求，确定调度业务类型为带宽敏感型；

其中，所述小块单深度IO请求表示IO请求数据的体量小于小块上限阈值且IO通道唯一。

3.根据权利要求2所述的方法，其特征在于，时延敏感型调度业务的重复数据删除操作方式为：离线重复数据删除；

带宽敏感型调度业务的重复数据删除操作方式为：离线重复数据删除和/或在线重复数据删除。

4.根据权利要求3所述的方法，其特征在于，所述IO路径包括存储节点和客户端，所述客户端通过网络向所述存储节点发起IO请求；

所述存储节点基于云存储系统构建，用于存放文件数据；

所述客户端用于执行文件的创建和删除，以及文件数据的读、写和更新操作。

5.根据权利要求4所述的方法，其特征在于，所述根据所述实时IO路径的运行参数和所述调度业务类型，选择重复数据删除调度方案，包括：

在确定调度业务类型为时延敏感型的情况下，根据当前存储节点的CPU利用率判断当前存储节点的CPU繁忙程度，其中，存储节点的CPU繁忙程度具有三个等级：繁忙、适中和空闲；

根据当前存储节点的CPU繁忙程度选择重复数据删除调度方案：

若当前存储节点的CPU繁忙程度为繁忙，选择重复数据删除调度方案为：待业务负载空闲时执行离线重复数据删除；

若当前存储节点的CPU繁忙程度为适中或空闲，选择重复数据删除调度方案为：立即执行重复数据删除。

6.根据权利要求5所述的方法，其特征在于，存储节点的CPU繁忙程度的各个等级分别对应不同的CPU利用率范围；

所述根据当前存储节点的CPU利用率判断当前存储节点的CPU繁忙程度，包括：

判断实时存储节点的CPU利用率所属的CPU利用率范围，确定当前存储节点的CPU繁忙程度的等级。