[发明专利]一种分布式存储系统有效
申请号: | 201611227452.9 | 申请日: | 2016-12-27 |
公开(公告)号: | CN106713465B | 公开(公告)日: | 2020-11-17 |
发明(设计)人: | 万志宏;陈海峰;王建德;朱林;史岩 | 申请(专利权)人: | 北京锐安科技有限公司 |
主分类号: | H04L29/08 | 分类号: | H04L29/08;G06F3/06 |
代理公司: | 北京品源专利代理有限公司 11332 | 代理人: | 胡彬;邓猛烈 |
地址: | 100044 北京市海淀区西小口*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 分布式 存储系统 | ||
本发明实施例公开了一种分布式存储系统,该系统包括:至少一个数据服务器、至少一个存储服务器以及中心交换机,所述至少一个数据服务器,通过所述中心交换机与所述至少一个存储服务器相连;所述至少一个数据服务器获取海量数据以及对所述海量数据进行过滤处理得到目标数据,将所述目标数据通过中心交换机发送至所述至少一个存储服务器;所述至少一个存储服务器接收并存储所述目标数据。利用该分布式存储系统,能够通过分布式的数据服务器独立的实现海量数据的过滤处理,有效地节省了数据的处理时间,同时也提高了数据的处理精度,并且避免了因数据处理的处理量过大而出现死机、宕机的风险,由此提高了分布式存储系统的用户体验。
技术领域
本发明实施例涉及计算机技术领域,尤其涉及一种分布式存储系统。
背景技术
随着计算机技术的飞速发展,各行各领域的数据呈几何级快速增长,传统的集中式存储系统已不能满足对海量数据的存储及处理,由此出现了分布式的存储系统。图1给出了一种现有的分布式存储系统的架构图,如图1所示,现有的分布式存储系统可包括:核心运算器11,与核心运算器11相连的多个粗糙数据存储节点12,其中,上述多个粗糙数据存储节点12均可用于存储所获取的原始数据或粗糙数据;同样,该分布式存储系统还包括一个与核心运算器11相连的精细数据存储节点13,该精细数据存储节点13用于存放对原始数据或粗糙数据进行优化处理后的数据。此外,分布式存储系统还包括一个与核心运算器11与相连的Web服务器10相连,用户可通过Web服务器10查询所需的数据信息。
一般地,存储在粗糙数据存储节点12中的数据往往具有数据来源繁杂、数据类型复杂以及数据信息冗余等特点,因此在将数据展示给用户前,需要对粗糙数据存储节点12中的数据进行优化处理,以提取用户需要的数据信息。其对数据的优化处理过程往往是核心运算器11获取每台粗糙数据存储节点12中的数据并依次进行处理,然后将处理后数据发送给精细数据存储节点13。
上述数据处理的方法,主要在核心运算器上进行,而核心运算器只能串行的获取每台粗糙数据存储节点中的数据并处理,由此耗费了较多的处理时间,此外,上述方式处理所得数据的精准度较低,而且也容易出现核心运算器因超负载而造成死机、宕机的风险,进而影响分布式存储系统的用户体验。
发明内容
本发明实施例提供了一种分布式存储系统,能够有效提高所存储的海量数据的处理效率,同时也提高了分布式存储系统对数据处理的精准度。
本发明实施例提供的一种分布式存储系统,包括:
至少一个数据服务器、至少一个存储服务器以及中心交换机,所述至少一个数据服务器,通过所述中心交换机与所述至少一个存储服务器相连;
所述至少一个数据服务器获取海量数据以及对所述海量数据进行过滤处理得到目标数据,将所述目标数据通过中心交换机发送至所述至少一个存储服务器;所述至少一个存储服务器接收并存储所述目标数据。
本发明实施例中提供的一种分布式存储系统,在该分布式存储系统中,基于至少一个数据服务器可获取使用者产生的海量数据,可对海量数据进行过滤处理得到目标数据,还可将目标数据通过中心交换机发送至至少一个存储服务器;基于至少一个存储服务器可以接收并存储目标数据。利用该分布式存储系统,能够通过分布式的数据服务器独立的实现海量数据的过滤处理,与现有的分布式存储系统相比,有效地节省了数据的处理时间,同时也提高了数据的处理精度,并且避免了因数据处理的处理量过大而出现死机、宕机的风险,由此提高了分布式存储系统的用户体验。
附图说明
图1给出了一种现有的分布式存储系统的结构示意图;
图2为本发明实施例一提供的一种分布式存储系统的结构示意图;
图3为本发明实施例二提供的一种分布式存储系统的结构示意图;
图4为本发明实施例三提供的一种分布式存储系统的结构示意图;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京锐安科技有限公司,未经北京锐安科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201611227452.9/2.html,转载请声明来源钻瓜专利网。