[发明专利]一种数据处理方法和装置

说明书

本发明公开了一种数据处理方法和装置，涉及计算机技术领域。该方法的一具体实施方式包括：生成待处理的数据在指定时间唯一对应的目录名；将该目录名拼接在预设路径后，以获得移动或拷贝所述数据的目标路径；将所述数据移动或拷贝至所述目标路径下。该实施方式能够避免冷数据移动或拷贝前后的校验异常，提高冷数据处理成功率。

技术领域

本发明涉及计算机技术领域，尤其涉及一种数据处理方法和装置。

背景技术

随着大数据应用的不断发展，相应的数据增长给集群存储带来越来越多的挑战，造成存储压力的不断升级，这就需要根据数据不同的访问频率对数据设置不同的存储级别，对于“不再访问”的数据应及时进行处理，从而提高资源利用率。通常，我们将超过一定时间没有被访问的数据定义为冷数据，对于这部分数据，可近似认为将不再使用，可以被归档，以腾出存储空间给访问更加频繁的数据。

在实现本发明过程中，发明人发现现有技术中至少存在如下问题：现有的冷数据处理方法在移动/拷贝冷数据时，需要将冷数据的源路径和全局配置的预设路径进行拼接，以得到移动/拷贝冷数据的目标路径。在一些场景中，上述移动/拷贝冷数据的过程，会由于源路径的不规整导致一些不可控的异常，例如，移动/拷贝前后的冷数据的大小校验不一致，或者直接导致移动/拷贝不成功。

因此，亟需一种能够避免冷数据移动/拷贝前后的校验异常，提高冷数据处理成功率的数据处理方法和装置。

发明内容

有鉴于此，本发明实施例提供一种数据处理方法和装置，能够避免冷数据移动/拷贝前后的校验异常，提高冷数据处理成功率。

为实现上述目的，根据本发明实施例的一个方面，提供了一种数据处理方法，包括：

生成待处理的数据在指定时间唯一对应的目录名；

将该目录名拼接在预设路径后，以获得移动或拷贝所述数据的目标路径；

将所述数据移动或拷贝至所述目标路径下。

可选的，本发明实施例提供的数据处理方法还包括：

获取待处理的数据的存储路径；

根据数据的存储路径生成待处理的数据在指定时间唯一对应的目录名。

可选的，本发明实施例提供的数据处理方法还包括：

记录所述目录名与所述数据的存储路径的对应关系，以根据所述目录名能够确定其对应的存储路径，对已移动或拷贝的数据进行还原。

可选的，生成待处理的数据在指定时间唯一对应的目录名包括：

生成指定时间的时间戳；

将所述数据的存储路径和时间戳组合为字符串，对该字符串进行加密，将获得的加密字符串作为所述目录名。

为实现上述目的，根据本发明实施例的另一个方面，还提供了一种数据处理装置，包括：

目录生成模块，用于生成待处理的数据在指定时间唯一对应的目录名；

路径生成模块，用于将该目录名拼接在预设路径后，以获得移动或拷贝所述数据的目标路径；

执行模块，用于将所述数据移动或拷贝至所述目标路径下。

可选的，本发明实施例提供的数据装置还包括：

获取模块，用于获取待处理的数据的存储路径；

所述目录生成模块进一步用于根据数据的存储路径生成待处理的数据在指定时间唯一对应的目录名。

可选的，本发明实施例提供的数据装置还包括：