[发明专利]基于Hadoop 与虚拟流媒体服务器集群的流媒体点播方法

说明书

技术领域

本发明涉及一种基于Hadoop(一种高容错性、高传输率、以流的方式进行访问的分布式存储集群)存储资源以及在刀片机上部署的虚拟流媒体服务器，使用虚拟机调度策略以及文件缓存策略的点播方法。

背景技术

随着互联网技术应用的日趋广泛，视频点播服务已成为人们日常生活的重要组成部分，视频点播服务质量的好坏很大程度取决于后台点播服务器的支持。构建后台点播服务器的方法有很多，申请人经过查新，检索到3篇有关流媒体服务器系统或流媒体点播方法的专利，它们分别是：

1.流媒体服务动态负载方法(申请号：200610106932.X)

2.一种适用大规模用户点播的集群式流媒体服务器系统(申请号：201010117647.4)

3.一种视频网格自适应负载均衡调度方法(申请号：200610144274.3)

上述现有专利共同存在的问题是：流媒体服务器基本都是真实的服务器而不涉及虚拟流媒体服务器集群；动态负载方法都是基于服务器的负载情况将用户的请求进行均衡的分配，而不考虑用户的热点程度；未考虑后台数据读取带宽因而无法动态控制虚拟机间隔缓存大小。

发明内容

本发明的目的是解决背景技术中有关流媒体服务器系统及流媒体点播方法专利的不足，提供一种将流媒体文件存放在Hadoop存储集群上，虚拟流媒体服务器集群部署在刀片服务器上，接收从Hadoop存储集群上获取流媒体文件数据，并采用虚拟流媒体服务器集群调度与数据缓存策略，实现流媒体点播功能的方法。

为达到以上目的，本发明是采取如下技术方案予以实现的：

一种基于Hadoop与虚拟流媒体服务器集群的流媒体点播方法，其特征在于，包括下述步骤：(1)流媒体文件存放在Hadoop存储集群上，(2)流媒体服务器构建在虚拟服务器集群之上，(3)虚拟流媒体服务器集群直接从Hadoop存储集群上获取流媒体文件数据，并采用虚拟流媒体服务器集群调度与数据缓存方法，实现流媒体点播功能，其中，步骤(3)所述的虚拟流媒体服务器集群调度方法是，虚拟机服务器管理节点用来控制虚拟流媒体服务器的开启以及关闭，虚拟机服务器管理节点以虚拟流媒体服务器集群网络带宽占用率超过80％或者内存占用率超过90％为依据，触发虚拟流媒体服务器创建机制；以虚拟流媒体服务器集群整体带宽占用率小于20％并且内存占用率小于30％且存在用户请求量为0的虚拟流媒体服务器为依据，触发虚拟流媒体服务器回收机制；

步骤(3)所述的虚拟流媒体服务器集群数据缓存方法是，采用了虚拟流媒体服务器集群的数据缓存均衡部署策略，为热点流媒体文件进行文件的前缀部署；根据流媒体文件实时热点程度，将实时热点文件部署在新开启的虚拟流媒体服务器上；并且在进行流媒体点播服务时，考虑请求相同流媒体文件的时间先后顺序以及关联性，对从Hadoop存储集群获取的数据采用对应的间隔缓存；根据虚拟流媒体服务器集群向Hadoop存储集群的文件读取带宽，动态控制各个虚拟流媒体服务器上的缓存大小，触发虚拟机调度策略。

上述方案中，所述的触发虚拟流媒体服务器创建机制的具体步骤为：

Step1：虚拟机服务器管理节点初始化；

Step2：虚拟机服务器管理节点获取每个虚拟流媒体服务器设置的预留内存θ_i以及预留的网络带宽μ_i；获取当前开启虚拟流媒体服务器个数N；

Step3：虚拟机服务器管理节点实时更新检测每个虚拟流媒体服务器占用的网络带宽α_i以及占用内存的β_i；如果虚拟流媒体服务器集群网络带宽占用率超过80％或者内存占用率超过90％，则跳转到

Step4，否则继续检测；

Step4：虚拟流媒体服务器从可分配的资源中，为将开启的虚拟流媒体服务器设置预留内存θ_N+1、网络带宽μ_N+1，开启虚拟流媒体服务器为用户点播进行服务。

所述的触发虚拟流媒体服务器回收机制的具体步骤为：

Step1：虚拟机服务器管理节点初始化；

Step2：虚拟机服务器管理节点获取每个虚拟流媒体服务器设置的预留内存θ_i以及预留的网络带宽μ_i；获取当前开启虚拟流媒体服务器个数N；