[发明专利]一种面向AWS平台的分布式数据管理方法

权利要求书

1.一种面向AWS平台的分布式数据管理方法，其特征在于，利用集中式数据分配与批量式数据挂载的方式来进行大规模集群数据准备，包括如下步骤：

步骤1，创建单台实例并挂载大量小容量EBS卷组，实现大数据的划分与分配；

步骤2，创建全部集群实例，与得到数据分配后的EBS卷组进行并行匹配挂载；

步骤3，待计算任务结束后，对存储服务与计算服务进行分离，卸载所有EBS卷组并终止集群实例，将并行数据结果单独存留在EBS卷组中。

2.根据权利要求1所述的一种面向AWS平台的分布式数据管理方法，其特征在于，步骤1的数据分配，具体步骤为：

步骤1-1，依据卷组标签扫描所需EBS卷组ID，采用循环模式分配存储设备名称，在实例外部利用EC2命令行工具进行挂载后向实例提交所有设备名；

步骤1-2，实例内部创建所有挂载文件路径并赋予相应权限，与接收到的存储设备进行系统级别挂载；

步骤1-3，利用用户自定义方法对集群数据进行划分，并对应转移到相应的小容量存储设备中去。

3.根据权利要求1所述的一种面向AWS平台的分布式数据管理方法，其特征在于步骤2的并行配对挂载，具体步骤为：

步骤2-1，依据资源标签扫描可用的EBS卷组与集群实例ID，利用循环模式进行配对挂载后，对每一实例上传分配的存储设备名；

步骤2-2，并行访问所有实例，创建挂载文件路径并赋予读写权限，在系统级别挂载设备。