[发明专利]一种云存储系统内主从设备数据快速同步的方法

摘要

本发明公开了一种云存储系统内主从设备数据快速同步的方法，采用数据读写操作日志分离方法；使用局部时间片延迟提交同步操作的技术；为了解决延迟同步时主存储设备发生故障对数据可靠性的影响，本发明还提供了针对于此分布式存储系统的更新和查询方法。为提高云存储的性能和可靠性提供基本的技术支持。实现云存储系统中主存储设备和辅助存储设备之间高效的数据同步。改善并优化现有操作日志同步方法的弊端，克服大量并发写操作引起的数据同步瓶颈，提高云存储系统的数据可靠性。

主权项

一种云存储系统内主从设备数据快速同步的方法，其特征在于，包括以下步骤：第一步，采用数据读写操作日志分离方法；首先把数据操作分为读和写两大类，分别建立读操作日志和写操作日志；读操作不涉及数据同步问题，忽略读操作日志重点考虑写操作引起的数据不一致；其次，专门为写操作建立一个线程池来调度CPU资源来实现独立的写操作运算，从技术角度使用可缓冲线程池来处理大量用户的写操作数据同步，可缓冲线程池能够根据用户负载的大小动态调整处理线程的数量，提高了云存储系统的资源利用率；第二步，使用局部时间片延迟提交同步操作的技术；对于大量用户的写数据操作，以一个固定时间窗为单位选择该时间片内的所有写操作一起完成数据同步；也就是当有写操作出现时并不是立即对辅助存储设备进行数据同步，而是把一个时间片的所有写操作集中进行同步处理，这样避免了大量的硬盘寻道时间；第三步，为了解决延迟同步时主存储设备发生故障对数据可靠性的影响，对局部时间片延迟周期中的用户请求提供事务回滚服务；当用户提交的写操作请求处于延迟时间片内，而此时主存储器设备又发生了故障需要切换辅助存储器，那么该延迟时间片内所有的用户写操作全部退回用户，需要重新发起请求。