[发明专利]基于三维数据访问的分布式服务器集群资源调度方法

说明书

技术领域

本发明属于计算机软件领域，涉及三维数据服务器的资源管理，具体涉及一种基于三维数据访问的分布式服务器集群资源调度方法。

背景技术

在地理信息数据处理中，特别是三维数据的广泛推广使用，数据量相对以往具有几何级数的增长，例如一颗卫星每半小时即可发回一次全波段数据（5个波段），每天的数据量可达1.1GB；采样率较低的数字电话，按每一取样用8位压扩量化，通常其数码率也需要8×8＝64kbps，一张A4(210mm×297mm)大小幅面的图片，即使采用中等分辨率(300dpi)的扫描仪按真彩色扫描，共有(300×210/25.4) ×(300×297/25.4)个象素，每个象素占3个字节，其数据量为26M字节。

由此可见，面对当今如此大量的数据，对网络服务器的性能提出了更高要求，通常采用分布式的服务器集群提高服务器带宽，但另一方面，服务器对负载变化不具有良好的适应性。在服务器集群的调度技术方面，大部分应用仍然使用传统服务器集群下使用的基于任务调度的策略。由于任务型的应用不能覆盖所有类型的应用；因此，基于任务调度的集群调度方法具有一定的局限性，并且调度粒度较大，难以发挥出服务器集群本身具有的特殊优势大量的数据传输和使有限的网络带宽变得不堪重负。

目前的经济运行调度为根据当前资源的负载情况，进行服务器资源调度。当发生突发大规模负载的情况时不能及时启动物理节点，从而导致运行变慢。同时，服务器集群中不同品牌的服务器对数据处理格式不同，也限制了服务器集群的整体性能。

发明内容

为克服现有技术不能及时应对负载突增造成系统运行速度突然减缓的技术缺陷，本发明公开了一种基于三维数据访问的分布式服务器集群资源调度方法。

本发明所述基于三维数据访问的分布式服务器集群资源调度方法，包括如下步骤：

S1.对各个服务器的数据进行统一转换，按照相同的格式输出数据；

S2.从历史负荷数据库中寻找服务器的负载警戒时间点 ；所谓负载警戒时间点，是当一台以上服务器的服务器资源利用量Dvm达到警戒值ALR时的时刻,

所述警戒值ALR= Mvm*A1,A1为预先设定的警戒百分比，服务器资源利用量Dvm=Mvm*Lvm，其中Mvm为服务器可调用资源，Lvm为服务器资源利用率；

S3.预先设定第一时间长度μ，在负载警戒时间点前μ时刻，开启备用服务器，新开启服务器的增加物理资源SN应大于N*Mvm*A2；

其中N为S1步骤中服务器资源利用量Dvm达到警戒值ALR的服务器数量，A2为预设的削峰参数。

优选的，所述步骤S1中进行统一转换数据采用基于OSGI组件架构的调度适配器。

优选的，所述负载警戒时间点的寻找方法为：

定义第二时间长度Δt，从历史负荷数据库中找出与预测日类型相同的多个比照日，对每一比照日按第二时间长度Δt间隔划分为N=24h/Δt个点，对多个比照日的属于相同时间点的服务器资源利用量取平均值作为该时间点的比照值，当任意连续两个比照值均大于警戒值ALR时，则较早的比照值对应的时间点为负载警戒时间点。

优选的，所述所述第一时间长度μ不少于500秒。

采用本发明所述的基于三维数据访问的分布式服务器集群资源调度方法，采用统一转换后的数据进行分配管理，提高了服务器集群的整体性能，根据历史数据确定负载警戒时间点，预先开启备用服务器进行分流迁移，保证每台服务器提前降低资源使用率，通过提前对服务器的启动并对服务器进行平滑迁移，达到负载平衡目的。

附图说明

图1为本发明所述服务器群利用调度适配器统一输出格式的示意图；

图2为本发明所述服务器资源利用量Dvm的一种具体计算方式示意图。

具体实施方式

下面结合附图，对本发明的具体实施方式作进一步的详细说明。

本发明的典型应用环境是在云计算资源池IaaS层，依赖的硬件系统为一个调度服务器管理的由多台服务器组成的服务器集群，调度服务器负责管理服务器的调度及分配。云计算的目的在于为不同的用户提供服务、计算能力和存储等，需要更加注重用户需求的满足度，且尽量避免资源调度负载失衡，同时又要尽可能做到节约能源，降低系统的功耗。硬件系统工作时，调度服务器调动集群中的不同服务器工作，并将任务分配至各个服务器。

本发明所述的基于三维数据访问的分布式服务器集群资源调度方法，包括如下步骤，