[发明专利]一种基于云计算环境下IDC虚拟化调度节能系统

说明书

本发明公开了一种基于云计算环境下IDC虚拟化调度节能系统，包括CenterManager、Executor、Zoo‑Keeper和ClientAPI四个模块，其中CenterManager分为ResourceManager和JobScheduler两个子模块，用户通过命令行、WebPortal和ClientAPI向CenterManager提交、查询和控制作业，以及查询应用集群或者单个节点的资源状态；本方案，不仅需要合理调度系统资源，保证系统较高的利用率，而且需要充分满足作业不同的定制化需求，建立作业软硬约束的转化机制，有效地为不同类型的批处理作业和互联网常驻型服务应用统一管理起来，不仅大幅增加了应用共享集群的规模，而且充分利用不同类型的应用性能瓶颈和高低峰时段互补的特征，显著地提高了应用集群的资源利用率，降低数据中心的总拥有成本。

技术领域

本发明属于调度系统技术领域，更具体地说，尤其涉及一种基于云计算环境下IDC虚拟化调度节能系统。同时，本发明还涉及一种基于云计算环境下IDC虚拟化调度节能系统的方法。

背景技术

互联网业务具有类型多、性能瓶颈多样、部署流程复杂、负载波动大和应用之间存在依赖关系等特点，因此对资源的需求提出不同的约束条件。有一类约束条件是必须满足的。由于开发和编译环境的限制，一些应用会要求节点操作系统、GLIBC或者GCC的版本必须高于某个特定的版本；为了保证性能，图形处理和生物DNA序列匹配等应用，会要求节点配置高性能的GPU代替通常的CPU；矩阵运算应用要求节点具有高性能的CPU和大容量的内存，等等，我们将上述必须满足的约束条件称之为“硬约束”。

此外，应用编程模型为了优化作业性能也会提出一些作业约束条件。例如Hadoop要求将作业下发至存储数据的节点上运行以节省网络带宽；网络密集型应用，要求将作业下发至相同或者相邻交换机的节点上运行，以充分利用相同或者相邻交换机的节点具有相对高的网络带宽。这些约束条件通常需要优先满足，我们称之为“软约束”。

为了支持混合型作业，作业调度策略必须同时满足上述多种不同类型的作业约束条件。现有的作业约束调度都面向批处理应用场景，无法满足批处理和服务型混合应用场景的需求，也不能满足不同类型作业多样化的性能优化需求，导致资源浪费严重。

发明内容

本发明的目的是为了解决现有技术中问题，而提出的一种基于云计算环境下IDC虚拟化调度节能系统。