[发明专利]一种网络内容存储系统及其路由方法

说明书

本发明所述的控制与存储分离的网络内容存储系统，包括存储子单元，主要由普通存储介质组成，用于存储网络内容；存储处理单元，用于对网络内容进行相关处理；存储控制单元，与存储处理单元分离，用于监控存储处理单元工作状态、存储子单元的存储状态，并根据用户需求与存储介质的特性，配置、管理存储处理单元的存储行为等。本发明采用控制与存储分离的思想，存储控制单元监测、管理存储处理单元的存储行为，以使网络内容智能均衡地存储到相应的存储子单元。存储控制单元可动态收集存储处理单元与存储子单元的状态。根据这些状态信息，用户可自由编写存储控制单元存储算法软件，提高存储设备的灵活性与智能性。

技术领域

本发明涉及网络内容存储技术领域，尤其涉及一种网络内容存储系统及其路由方法。

背景技术

现有互联网中存在大量数据冗余，急需一种高效高速缓存机制减少网络冗余。智慧协同网络(SINET)采用“资源与位置分离”的设计思想，从原始设计上支持数据包或数据块粒度的缓存，显著减少网络冗余、提高链路利用率与用户体验。SINET不再采用IP地址寻址，取而代之是以唯一确定的新的编址空间：SID(Service ID，服务标识)，每个网络内容都有一个唯一的SID。同时，SINET引入缓存的概念，将缓存功能加入SINET基础网络设备，即网络组件，网络组件根据网络数据包的SID在其缓存系统中进行存取，从而在网络层支持数据包粒度的沿路缓存。SINET缓存机制工作在网络层，与应用层解耦，缓存机制具有灵活、高效以及与应用层协议无关等优势。网络组件根据缓存策略存储流经自身的数据，方便其他用户就近获取数据，提高网络效率。

传统网络组件中的存储系统一般直接采用高速的存储介质如静态或动态随机存储器来存储网络内容，以实现其线速存储转发，但这种系统存储容量有限，并且价格昂贵，不便于大规模的部署；另一种网络组件中的存储系统是采用分布式的存储技术，使用廉价的存储介质的并行处理来实现网络组件的线速存储转发。分布式存储技术一般采用存储管理单元对存取的内容进行分配与管理。客户端存取数据之前向存储管理单元询问存取数据的位置，确定数据位置后再向数据归属的存储介质发起存取。这种存储系统的存储管理单元负责存储内容的路由计算与转发，通过哈希等统一路由算法将网络内容路由转发到不同的存储介质中。这种方法使廉价存储介质能够并行处理，提高了存储系统的总带宽，减少了存储系统的成本。但是，因为路由算法与转发功能过度绑定，其灵活性与扩展性存在缺陷。随着存储需求不断地增加，这种传统技术将无法高效地处理大规模数据存储。对于由大量内容存储设备组成的大规模存储系统，传统存储设备因负责路由计算的控制平面与负责路由转发的转发绑定在一个硬件上，其无法智能协作地感知其他设备的存储状态，因此无法实现大规模网络系统的智慧协作存储。

发明内容

本发明提供一种网络内容存储系统，以提升存储系统的灵活性、智能性；提高存储设备存储速率，降低生产成本。

为了实现上述目的，本发明采取了如下技术方案：

本发明提供一种网络内容存储系统，包括存储控制单元、存储处理单元和存储子单元；所述存储控制单元与所述存储处理单元通信连接，所述存储处理单元与所述存储子单元通信连接；

所述存储控制单元配置所述存储处理单元的路由方法，以及监测所述存储处理单元和所述存储子单元的存储状态；

所述存储处理单元接收终端发送的存储内容，并按照所述路由方法将所述存储内容存储到所述存储子单元。

优选的，所述存储控制单元包括第一通信模块、控制接口抽象层和存储控制应用层；

所述第一通信模块与所述存储处理单元通信连接，所述存储控制应用层通过所述控制接口抽象层与所述第一通信模块通信连接；

通过存储控制应用层配置所述存储处理单元的路由方法，所述第一通信模块接收所述存储处理单元上报的存储内容、所述存储子单元的存储状态以及发送所述路由方法。