[发明专利]一种在分布式系统中实现多文件副本读写的方法与设备

说明书

本申请的目的是提供一种用于在分布式系统中实现多文件副本读写的方法与设备。具体地，用户设备获得文件写入异常，向对应元数据服务器发送对应的重映射请求，元数据服务器重新分配多个副本服务器，并在每个副本服务器上建立目标文件的第二文件副本，第二文件副本引用之前副本，用户设备向重新分配的多个副本服务器分别发送关于所述第二文件副本的读写请求，副本服务器接收并响应执行。与现有技术相比，本申请通过建立新旧副本间的引用关系，在不中断读写的情况下进行新旧副本间的数据转储和响应，从而在副本写入发生异常后快速恢复读写，保证了数据的强一致性和可靠性，降低了在线写入的处理延时，减少后台转储流量消耗，提高系统的稳定性。

技术领域

本申请涉及计算机领域，尤其涉及一种在分布式系统中实现多文件副本读写的技术。

背景技术

随着大数据时代的来临，分布式数据存储应用越来越广泛，为保障数据安全避免数据损坏丢失，通常使用多副本实时写入的方式，即直至所有副本均写成功才返回用户写入成功。在这一方式实施过程中由于各种环境异常会引起部分副本写入失败，因此在失败情况下需要快速恢复写操作并保证副本间的数据一致性。现有技术，往往通过剔除异常的副本并先反馈用户写入成功后进行副本数据补齐，或剔除异常副本后先加入新的副本并在数据补齐后反馈用户写入成功，或通过将要写入数据以日志的方式记录并转储等方式对副本写入失败后进行恢复。

然而，现有技术在需要保证副本间一致性的情况下存在恢复读写安全风险高，等待延时长，后台流量大占用带宽等问题。且在允许数据可以随机改写的情况，这一过程需要保证写入的原子性，当这一情况下副本写入异常后现有技术在保证数据可靠性和强一致性上有所欠缺。

发明内容

本申请的一个目的是提供一种在分布式系统中实现多文件副本读写的方法与设备，用以解决分布式存储系统中副本写异常后存在的延时以及无法保障强一致性的问题。

根据本申请的一个方面，本申请提供了一种在元数据服务器端用于在分布式系统中实现多文件副本读写的方法，该方法解决了分布式存储系统中副本写异常后存在的延时以及无法保障强一致性的问题，该方法包括：

接收对应用户设备基于文件写入异常发送的关于目标文件的重映射请求，其中，所述用户设备在对所述目标文件的第一文件副本执行写操作时获得所述文件写入异常；

根据所述重映射请求为所述用户设备重新分配多个副本服务器，并在每个副本服务器上建立所述目标文件的第二文件副本，其中，所述第二文件副本引用所述第一文件副本；

将所述第二文件副本的信息提供至所述用户设备。

根据本申请的另一个方面，本申请提供了一种在用户设备端用于在分布式系统中实现多文件副本读写的方法，该方法解决了分布式存储系统中副本写异常后存在的延时以及无法保障强一致性的问题，该方法包括：

若在对目标文件的第一文件副本执行写操作时获得文件写入异常，向对应元数据服务器发送对应的重映射请求；

接收所述元数据服务器基于所述重映射请求发送的、所述目标文件的第二文件副本的信息；

向所述元数据服务器为所述用户设备重新分配的多个副本服务器分别发送关于所述第二文件副本的读写请求，其中，每个副本服务器分别存储有所述第二文件副本。

根据本申请的另一个方面，本申请提供了一种在副本服务器端用于在分布式系统中实现多文件副本读写的方法，该方法解决了分布式存储系统中副本写异常后存在的延时以及无法保障强一致性的问题，该方法包括：

接收对应元数据服务器发送的文件副本建立请求；

根据所述文件副本建立请求建立对应目标文件的第二文件副本，其中，所述第二文件副本引用所述目标文件的第一文件副本；

接收对应用户设备对所述第二文件副本的读写请求。