[实用新型]一种分布式数据存储系统

说明书

技术领域

本实用新型涉及一种分布式数据存储系统，属于计算机存储领域。

背景技术

分布式文件系统存储已经逐渐在新的时代展现出了其特有的优势，比如支持超大数据的存储，存储量可以达到PB级别，检测和快速反应系统或硬件故障，支持磁盘容量扩展性，而不影响到整体架构，保证数据的一致性等。因此在很多场景下都会考虑采用分布式文件系统存储。虽然分布式文件存储系统有这么多的优点，与传统存储方案相比在某些方面还是需要不断的改进，比如在存储容量上，主流的方式为多个副本存储，但是存储量就会较大，同时造成读写消耗较大，采用一些压缩以及安全的算法保存数据的时候，会将处理后的数据和解密的密钥存储在同一类存储器，这样并不能完全消除，验证用的数据的安全威胁。

实用新型内容

为了解决上述问题，本实用新型通过提供一种分布式数据存储系统。

本实用新型采用的技术方案为一种分布式数据存储系统，包括：数据输出端、副本存储器单元、固态硬盘单元、数据接口单元和存储服务器组；数据输出端连接副本存储器单元，副本存储器单元连接固态硬盘单元，固态硬盘单元连接数据接口单元，数据接口单元连接存储器服务器组。

优选地，所述固态硬盘单元包括用于控制固态硬盘单元的数据输出/输入的管理芯片，基于预设的规则控制数据的输出/输入。

优选地，所述数据接口单元包括用于将数据进行纠删处理的纠删处理芯片和用于引导数据存储的对象存储芯片。

优选地，所述存储服务器组为基于对象存储的设备。

优选地，所述预定的规则包括：所述固态硬盘单元中所缓存的数据的大小达到所述预定大小；或者所述副本存储器单元写入数据的操作超过预定时长；或者所述固态硬盘单元出现故障。

本实用新型的有益效果为提供备份存储器以存储原始数据，通过固态硬盘以作为数据缓存以提高数据传输速度，通过纠删技术以提高数据利用率，通过对象存储技术以提高存储效率，能够实现数据的安全和高效的存储和运用，有利于数据管理能力。

附图说明

图1所示为基于本实用新型实施例的一种分布式数据存储系统的示意图。

具体实施方式

以下结合实施例对本实用新型进行说明。

基于实用新型的实施例，如图1所示一种分布式数据存储系统，包括：数据输出端、副本存储器单元、固态硬盘单元、数据接口单元和存储服务器组；数据输出端连接副本存储器单元，副本存储器单元连接固态硬盘单元，固态硬盘单元连接数据接口单元，数据接口单元连接存储器服务器组。

建立副本池，将数据存储到副本池（副本存储器），这样就保证了一份数据有多个备份，一旦系统出现单点故障的时候，副本池就自动接管，恢复到故障前的状态；副本存储器单元接收数据并存入，设置备份，完成备份之后，将数据输出到固态硬盘单元以增加数据传递和处理的速度，固态硬盘单元在抵达一定条件的时候，通过数据处理的数据接口单元将缓存数据提取出来并进行纠删码处理，将经过处理得到的检验数据和缓存数据映射到OSD设备（存储服务器组）,例如按照4数据块和1个编码块，则纠删码处理后的纠删池分为5个块，每个块存储到一个OSD中，将块的编号作为唯一性，保存到对象中；假设有5个OSD，每一个OSD对应一个纠删池块，突然有1个OSD发生故障，这种情况下数据整体上并没有受到破坏，在纠删的过程中通过一定的计算方法已经将1个OSD故障出现的情况纳入在内，纠删池的目的就是为了节省存储空间，充分考虑到了编码块出错的比例，满足了用极少的空间存储大容量的数据，提升了磁盘的存储能力。

所述固态硬盘单元包括用于控制固态硬盘单元的数据输出/输入的管理芯片，基于预设的规则控制数据的输出/输入。

所述预定的规则包括：所述固态硬盘单元中所缓存的数据的大小达到所述预定大小；或者所述副本存储器单元写入数据的操作超过预定时长；或者所述固态硬盘单元出现故障。

所述数据接口单元包括用于将数据进行纠删处理的纠删处理芯片和用于引导数据存储的对象存储芯片。

所述存储服务器组为基于对象存储的设备。

磁盘的存储容量扩大了，也就意味着在计算数据的时间上耗时更长，会影响到存储的性能，为了解决这个问题，增加了一个缓存池，缓存池采用固态硬盘作为介质，将进来的数据先存储到缓存池，由于固态硬盘读写效率非常高，当缓存数据积累到一定的量的时候，再一次性写入到OSD中，一个是缓解了内存的压力，再一个是减少了写入的来回次数；