[发明专利]数据迁移的发送方法及装置、存储介质、电子装置

权利要求书

1.一种数据迁移的发送方法，其特征在于，包括：

获取在线存储平台发送的待迁移到大数据平台的迁移数据，其中，所述迁移数据包括：非结构化的迁移数据；

从虚拟文件系统中确定数据迁移方式，并根据所述数据迁移方式将所述迁移数据迁移到所述大数据平台；

其中，根据所述数据迁移方式将所述迁移数据迁移到所述大数据平台，包括：

在从所述虚拟文件系统中确定的所述数据迁移方式为文件映射方式的情况下，将所述迁移数据按照所述文件映射方式映射到所述大数据平台；

在从所述虚拟文件系统中确定的所述数据迁移方式为管道流传输方式的情况下，将所述迁移数据按照所述管道流传输方式传输到目标存储位置，并在所述目标存储位置上，将所述迁移数据迁移到所述大数据平台；

其中，根据所述数据迁移方式将所述迁移数据迁移到所述大数据平台之前，所述方法还包括：

获取所述迁移数据的数据类型信息；

根据所述数据类型信息判断是否存在目标目录，其中，所述目标目录用于所述大数据平台存储所述迁移数据；

在不存在所述目标目录的情况下，在所述大数据平台中创建所述目标目录。

2.根据权利要求1所述的方法，其特征在于，从虚拟文件系统中确定数据迁移方式，包括：

获取所述迁移数据的源地址的目标格式，其中，不同的源地址用于指示不同的在线存储平台；

根据所述目标格式确定所述迁移数据对应的所述虚拟文件系统，以从所述虚拟文件系统中确定数据迁移方式。

3.根据权利要求2所述的方法，其特征在于，根据所述数据迁移方式将所述迁移数据迁移到所述大数据平台，包括：

将所述迁移数据转换为所述虚拟文件系统对应的文件对象，其中，不同的文件对象对应不同的虚拟文件系统；

根据所述数据迁移方式将所述文件对象迁移到所述大数据平台。

4.根据权利要求1所述的方法，其特征在于，所述方法还包括：

获取所述迁移数据的源地址和目的地址，其中，所述目的地址用于指示所述迁移数据待迁移到所述大数据平台的位置；

对所述源地址和所述目的地址进行验证，在验证通过的情况下，从所述虚拟文件系统中确定数据迁移方式，并根据所述数据迁移方式将所述迁移数据迁移到所述大数据平台。

5.根据权利要求1所述的方法，其特征在于，获取在线存储平台发送的待迁移到大数据平台的迁移数据，包括：

确定所述在线存储平台发送的目标数据的数据类型；

在所述数据类型为文件的情况下，将所述目标数据作为所述迁移数据；

在所述数据类型为目录的情况下，从所述目标数据所指示的目录中获取所述迁移数据。

6.根据权利要求1所述的方法，其特征在于，在所述迁移数据还包括：结构化数据的情况下，所述方法还包括：

从预先设置的源地址所指示的存储位置获取待迁移的结构化数据；

将所述结构化数据生成Map对象；

将所述Map对象迁移到所述大数据平台，以实现将所述结构化数据迁移到所述大数据平台。

7.根据权利要求6所述的方法，其特征在于，将所述Map对象迁移到所述大数据平台，包括：

为所述Map对象设置多个Map任务，其中，每一个Map任务用于将所述每一个Map任务对应的Map对象迁移至所述大数据平台；

按照目标调度器的分配按照预设顺序执行所述多个Map任务，以将所述Map对象迁移到所述大数据平台。