[发明专利]一种大数据容器化中心调度系统和方法

权利要求书

1.一种大数据容器化中心调度系统，其特征在于，包括接入层，用于接收用户的服务请求；

任务管理层，用于接收接入层的服务请求，生成对作业、程序、工作流的管理数据命令；

容器层，包括多个容器节点，用于产生基于任务管理层中服务请求的调度结果；

资源层，用于为容器层提供资源支撑。

2.根据权利要求1所述的一种大数据容器化中心调度系统，其特征在于，所述接入层通过用户界面接收用户的服务请求。

3.根据权利要求1所述的一种大数据容器化中心调度系统，其特征在于，所述任务管理层包括任务服务器，数据处理节点，任务调度模块以及数据存储模块，其中，

所述任务服务器，用于接收接入层的服务请求；

所述数据处理节点，用于对根据所述服务请求采集数据源，对数据源进行清洗、处理操作；

所述任务调度模块，用于将清洗、处理后的数据调度至容器层进行处理；

所述数据存储模块，用于存储服务请求的信息、容器层处理后的结果信息以及与服务请求对应的资源信息。

4.根据权利要求1所述的一种大数据容器化中心调度系统，其特征在于，所述容器节点包括监控执行节点、调度预处理节点以及调度决策节点，

所述监控执行节点，用于监控所有容器节点的运行状态，以及判断是否有来自任务管理层的服务请求；

所述调度预处理节点，用于根据接收到的服务请求进行资源匹配；

所述调度决策节点，用于将服务请求调度至匹配的资源容器进行资源调度处理，以及根据容器的运行状态进行周期性的调度和决策。

5.根据权利要求2所述的一种大数据容器化中心调度系统，其特征在于，所述用户界面根据任务关联关系对基于服务请求的调度结果进行可视化展现，并自动生成高精度的数据依赖可视化图标，从而为用户提供交互界面。

6.根据权利要求1所述的一种大数据容器化中心调度系统，其特征在于，所述系统还包括安全决策层，用于支持Hadoop/Hive/Spark的策略管理，并对相应的策略添加白名单、黑名单的分组及用户。

7.一种大数据容器化中心调度方法，其特征在于，所述方法包括，

通过接入层接收用户的服务请求；

通过任务管理层接收所述服务请求，生成对作业、程序、工作流的管理数据命令；

通过容器层产生基于任务管理层中服务请求的调度结果，并向用户展示所述调度结果，所述容器层包括多个容器节点，并部署在资源层中。

8.根据权利要求7所述的大数据容器化中心调度方法，其特征在于，通过任务管理层接收所述服务请求，生成对作业、程序、工作流的管理数据命令的步骤包括：

通过任务服务器接收接入层的服务请求；

通过数据处理节点对根据所述服务请求采集数据源，对数据源进行清洗、处理操作；

通过任务调度模块将清洗、处理后的数据调度至容器层进行处理；

通过数据存储模块存储服务请求的信息、容器层处理后的结果信息以及与服务请求对应的资源信息。

9.根据权利要求7所述的大数据容器化中心调度方法，其特征在于，通过容器层产生基于任务管理层中服务请求的调度结果的步骤，包括：

通过监控执行节点监控所有容器节点的运行状态，以及判断是否有来自任务管理层的服务请求；

通过调度预处理节点根据接收到的服务请求进行资源匹配；

通过调度决策节点将服务请求调度至匹配的资源容器进行资源调度处理，以及根据容器的运行状态进行周期性的调度和决策。

10.根据权利要求7所述的大数据容器化中心调度方法，其特征在于，向用户展示所述调度结果的步骤包括根据任务关联关系对基于服务请求的调度结果进行可视化展现，并自动生成高精度的数据依赖可视化图标，从而为用户提供交互界面。