[发明专利]一种基于YARN的共享集群弹性伸缩系统及方法

摘要

本发明公开了一种基于YARN的共享集群弹性伸缩系统及方法。该系统包括：固定节点、随着集群负载的变化而加入集群或从集群中释放的弹性节点、应用管理器、运行在固定节点上的资源管理器和运行在固定节点或弹性节点上的节点管理器。资源管理器用于进行资源的调度、监控集群的资源利用率以及根据集群的资源利用率与公有云平台进行交互以将弹性节点加入集群或释放集群中的弹性节点。应用管理器根据资源管理器对资源的分配，与节点管理器进行通信，使节点管理器所在的固定节点或弹性节点启动运行任务，并对任务进行管理和监控；节点管理器使固定节点或弹性节点运行任务。本发明能够使共享集群的规模随负载的变化而弹性的伸缩。