[发明专利]一种分布式调度方法及装置、设备、存储介质

权利要求书

1.一种分布式调度方法，其特征在于，所述方法包括：

获取应用程序和所述应用程序运行需要的运行环境；所述应用程序为Python应用程序，所述运行环境为Python的虚拟环境；

确定所述应用程序的配置参数；

根据所述配置参数，在分布式集群中进行节点调度，确定用于运行所述应用程序的目标节点；其中，所述分布式集群包括多个节点；

根据所述配置参数，生成配置文件；

根据所述配置文件，启动Skein模块；

调用所述Skein模块将所述应用程序和运行所述应用程序的运行环境缓存在分布式文件系统；

调用所述Skein模块读取所述分布式文件系统中的所述应用程序和运行所述应用程序的运行环境；

调用所述Skein模块将所述应用程序和所述运行环境发送到所述目标节点，以通过所述目标节点在所述运行环境中运行所述应用程序。

2.根据权利要求1所述的方法，其特征在于，所述将所述应用程序和所述运行环境发送到所述目标节点，还包括：

调用所述分布式文件系统清除缓存的所述Python应用程序和所述虚拟环境。

3.根据权利要求1所述的方法，其特征在于，所述根据所述配置参数，在分布式集群中进行节点调度，确定用于运行所述应用程序的目标节点，包括：

调用分布式集群的资源管理器确定分布式集群中满足所述配置参数的资源空闲节点；

调用分布式集群的资源管理器根据所述资源空闲节点，确定用于运行所述Python应用程序的目标节点。

4.根据权利要求3所述的方法，其特征在于，所述配置参数中至少包括：运行所述Python应用程序所需的内存数量和处理器核心数量，所述调用分布式集群的资源管理器确定分布式集群中满足所述配置参数的资源空闲节点，包括：

调用分布式集群的资源管理器确定分布式集群中满足所述配置参数中内存数量、处理器核心数量的资源空闲节点；

对应地，所述调用分布式集群的资源管理器根据所述资源空闲节点，确定用于运行所述Python应用程序的目标节点，包括：

调用分布式集群的资源管理器将所述资源空闲节点按照所述内存数量、处理器核心数量进行排序；

调用分布式集群的资源管理器将排序第一的资源空闲节点确定为用于运行所述Python应用程序的目标节点。

5.根据权利要求1所述的方法，其特征在于，所述获取应用程序和所述应用程序运行需要的运行环境，包括：

检测可视化界面中导入的所述应用程序；

根据所述应用程序的编写语言获取所述应用程序运行需要的运行环境；

所述确定所述应用程序的配置参数，包括：

检测在所述可视化界面中输入的所述应用程序的配置参数。

6.根据权利要求1至5任一项所述的方法，其特征在于，在所述将所述应用程序和所述运行环境发送到所述目标节点之后，所述方法还包括：

调用分布式集群的资源管理器监控所述目标节点的运行状态；

在所述运行状态异常的情况下，将异常运行状态对应的告警信息发送给可视化界面。