[发明专利]一种数据的迁移方法及装置

说明书

本申请公开了一种数据的迁移方法及装置，能够从第一数据库中先确定满足数据筛选条件的待迁移数据，并获取待迁移数据所属的数据文件的文件标识。如此能够确定待迁移数据的数据文件。再基于文件标识，从数据文件中获取待迁移数据，将待迁移数据存储至第二数据库中，实现对数据的迁移。在本申请提供的数据迁移方法中，通过对满足筛选条件的数据进行迁移，实现以数据为单位的迁移，能够避免以文件或者目录为单位迁移所导致的不能完整迁移非结构化数据的问题。

技术领域

本申请涉及数据处理领域，具体涉及一种数据的迁移方法及装置。

背景技术

非结构化数据是数据结构不规则或不完整，没有预定义的数据模型，不方便用数据库二维逻辑表来表现的数据。非结构化数据，例如是办公文档、文本、图片、XML(Extensible Markup Language，可扩展标记语言)、HTML(Hyper Text Markup Language，超文本标记语言)、各类报表、图像信息、音频信息或者视频信息的数据等。

目前的数据迁移技术大多是以文件和目录为单位对数据库中的数据进行迁移的。但是，非结构化数据在数据库中并不以文件或者目录为单位储存数据。这导致数据迁移技术难以满足非结构化数据的迁移需要。

发明内容

有鉴于此，本申请实施例提供一种数据的迁移方法及装置，能够对满足筛选条件的数据进行迁移，实现以数据为单位的迁移。

为解决上述问题，本申请实施例提供的技术方案如下：

第一方面，本申请提供一种数据的迁移方法，所述方法包括：

从第一数据库确定满足数据筛选条件的待迁移数据；

获取所述待迁移数据所属的数据文件的文件标识；

基于所述文件标识，从所述数据文件中获取所述待迁移数据；

将所述待迁移数据存储至第二数据库中，从所述第一数据库中删除所述待迁移数据。

在一种可能的实现方式中，所述将所述待迁移数据存储在第二数据库中，包括：

基于目标数量的迁移线程将所述待迁移数据迁移至第二数据库中，所述目标数量是基于线程数量参数创建的。

在一种可能的实现方式中，所述从所述第一数据库中删除所述待迁移数据，包括：

从所述第一数据库中删除包括已迁移标识的待迁移数据，所述已迁移标识用于标识迁移成功的待迁移数据。

在一种可能的实现方式中，在所述从所述第一数据库中删除所述待迁移数据之前，所述方法还包括：

为与所述第二数据库中的数据相同的待迁移数据分配已迁移标识。

在一种可能的实现方式中，所述第二数据库为基于对象的存储的数据库，所述第二数据库存储的待迁移数据的对象标识与所述文件标识对应。

在一种可能的实现方式中，所述文件标识存储在所述第一数据库的消息队列中。

在一种可能的实现方式中，所述数据筛选条件包括所述待迁移数据的元数据信息。

第二方面，本申请提供一种数据的迁移装置，所述装置包括：

确定单元，用于从第一数据库确定满足数据筛选条件的待迁移数据；

第一获取单元，用于获取所述待迁移数据所属的数据文件的文件标识；

第二获取单元，用于基于所述文件标识，从所述数据文件中获取所述待迁移数据；

迁移单元，用于将所述待迁移数据存储至第二数据库中，从所述第一数据库中删除所述待迁移数据。