[发明专利]一种流媒体系统数据存储方法

说明书

技术领域

本发明涉及流媒体系统领域，具体来讲是一种流媒体系统数据存储方法。

背景技术

流媒体系统存储的是大容量的媒体数据，要对这些媒体数据完成大量并发的实时流传输，除了需要与之相应的网络IO带宽，还要有与之匹配的磁盘IO带宽。如何将数据存储在流媒体服务器上，在服务器上如何组织各个磁盘，直接决定了服务器的并发能力和媒体数据的安全性。

在目前的一些流媒体分布式存储系统中，数据被分成很多切片，切片是按磁盘块大小，条带式地逐个存储在各个磁盘上，系统配置的磁盘数量很可能小于每个切片的块数，也就是说切片在每个磁盘都存有内容，所有磁盘并发地读取，以提高系统的IO带宽。但磁盘是一个较容易损坏的设备，并且随着使用时间的延长，磁盘性能逐渐下降，导致读取有些磁盘块时间过长，明显降低系统IO带宽。

如果某个磁盘出现故障，系统要停止运行，再重新启动提供服务，如果没有做数据备份，流媒体服务器上的绝大部分切片在此磁盘上的数据都将丢失，称之为垃圾数据，甚至可能造成重大损失。点播访问时，看到的将是跳跃的画面，更严重时，可能导致流媒体服务器的崩溃。为了恢复这部分数据，最简单有效的方法就是清空整个服务器上的内容，重新上载或者从别服务器拷贝过来，可是这个数据量非常庞大，将消耗很长的时间和很大的网络带宽。但是，如果只拷贝那些丢失的块数据，并重新生成访问时的索引记录，又对系统软件的复杂度要求较高，并不利于大规模的使用。

发明内容

针对现有技术中存在的缺陷，本发明的目的在于提供一种流媒体系统数据存储方法，提高系统的IO能力，切片保存两份，分别位于不同磁盘，当其中一个磁盘出现故障时，读取另一个磁盘的备份数据，数据恢复简单，不必消耗很长时间和较大网络带宽，对系统软件的复杂程度要求较低。

为达到以上目的，本发明采取的技术方案是：一种流媒体系统数据存储方法，包括如下步骤：

(1)将流媒体文件按相同的播放时间长度切成切片；

(2)将服务器每个磁盘分成容量相同的内区和外区两部分，内区和外区均分成大小相等的磁盘块，并建立索引信息；

(3)将所述切片按磁盘块大小，分成多个切片块，并均匀分配到所有磁盘的外区的磁盘块上；

(4)将所述切片块均匀分配到所有磁盘的内区的磁盘块上，且保证同一切片块分配到不同磁盘的内区和外区；

(5)将所述切片块写入其所在的外区和内区，并为切片块所在外区和内区分配的磁盘号和磁盘块号生成分配索引信息；

(6)若切片块写入时，某一区磁盘块有错误，导致写入错误，则在该区重新分配磁盘块，并从另一区读取正确的切片块进行复制。

在上述技术方案的基础上，所述切片的存储大小各不相同。

在上述技术方案的基础上，所述切片分配磁盘时，根据磁盘剩余存储空间的大小，先分配剩余存储空间最大的磁盘。

在上述技术方案的基础上，存储后按照以下步骤读取：

①根据请求播放的时间点，确定系统访问的切片；

②根据所述切片的分配索引信息，得到存储在外区和内区的磁盘号、磁盘块号；

③若外区所在磁盘正常工作，且该磁盘块号有效，则优先读取外区；否则读取内区所在磁盘的磁盘块号；

④若发现多次读取某一磁盘块出现错误，标记该磁盘块不可用，并重新分配磁盘块，发起复制。

在上述技术方案的基础上，所述系统访问的切片由请求的播放时间点除以切片时间大小求得。

在上述技术方案的基础上，若所述磁盘不能正常工作时，从其它磁盘的内区访问，在线更换磁盘，从其它磁盘将数据复制到更换后的磁盘。

本发明的有益效果在于：

I.将切片按磁盘块大小，分成很多个切片块，逐个存储在流媒体服务器的磁盘上，磁盘并发地读写媒体内容，提高系统的整体磁盘IO能力。

II.如果发现系统中磁盘出现故障，可在线拔出这个磁盘，位于这个磁盘上的所有数据，因为在别的磁盘上面均有备份数据，系统还能正常提供服务，保证播放画面平稳。

III.当插入一个新磁盘后，根据切片索引的记录，将别的磁盘上本应存储在新磁盘上的切片，拷贝到新磁盘，数据恢复简单，保证数据块共有两份拷贝以备磁盘的损坏，不必消耗很长时间和较大网络带宽，对系统软件的复杂程度要求较低。

具体实施方式

以下对本发明的实施例作进一步详细说明。

一种流媒体系统数据存储方法，本实施例中，流媒体服务器带有4块磁盘(D0、D1、D2、D3)，每个磁盘的容量为1GB，磁盘存储块大小为2MB。

本实施例存储时步骤如下：