[发明专利]一种持续超高速的数据卸载系统

摘要

本发明公开了一种持续超高速的数据卸载系统，包括控制设备和多台磁盘阵列，用于对记录仪设备中的数据文件进行卸载，控制设备分别与记录仪设备、各磁盘阵列连接，记录仪设备与各磁盘阵列之间连接形成多个数据传输通道，各数据传输通道均带有特定的ID号，磁盘阵列中设置有转储单元，记录仪设备中设置有卸载服务单元，本发明利用并行计算技术，构建分布式存储系统，将数据卸载工具中数据转储的多线程读写操作修改为分布式并行操作，提高数据卸载的工作效率，大幅度提升数据转储的速度，从而减少海量超大数据卸载所需时间。

主权项

1.一种持续超高速的数据卸载系统，包括控制设备和多台磁盘阵列，用于对记录仪设备中的数据文件进行卸载，其特征在于，所述控制设备分别与记录仪设备、各磁盘阵列连接，所述记录仪设备与各磁盘阵列之间连接形成多个数据传输通道，各数据传输通道均带有特定的ID号，所述磁盘阵列中设置有转储单元，所述记录仪设备中设置有卸载服务单元，其中：所述控制设备，用于扫描记录仪设备和磁盘阵列，发送配置命令给卸载服务单元完成配置，选择记录仪设备上需要卸载的文件列表，向所述记录仪设备上的卸载服务单元下发卸载命令；所述卸载服务单元，用于响应控制设备的配置命令，完成配置，并接收控制设备的卸载命令，根据卸载命令中携带的需要卸载的文件列表信息，扫描记录仪设备上的数据文件，获取需要卸载的文件列表，依次从文件列表中获取单个文件进行分片处理，拆分为大小相同的分片并进行编号，向配置的磁盘阵列发送操作指令，根据编号将分片通过数据传输通道发送，并在完成该单个文件的卸载后，更新元数据信息，将该元数据信息发送至指定的磁盘阵列上；所述转储单元，用于响应卸载服务单元的操作指令，将接收的分片以单文件追加方式进行存盘，将接收的元数据信息储存在磁盘阵列的指定位置。