[发明专利]一种数据驱动可扩展的智能通用任务调度系统

权利要求书

1.一种数据驱动可扩展的智能通用任务调度系统，其特征在于，包括：应用信息收集系统、信息传递系统、信息存储系统、数据智能处理系统和任务调度系统；

应用信息收集系统收集任务运行的资源需求信息，通过信息存储系统存储所述资源需求信息；再通过信息传递系统将所述资源需求信息传递给数据智能处理系统；数据智能处理系统首先对资源需求信息中构成的数据做预处理与解析，并以内存向量列表格式表示，然后依据解析结果生成所要构造的神经网络的参数，再按照所述参数创建对应的神经网络，神经网络以资源需求信息数据的内存向量表示为训练的输入数据训练学习神经网络的权重参数，训练结束后得到神经网络表示的任务调度决策信息生成函数；任务调度系统利用所述任务调度决策信息生成函数输出的决策信息为调度依据，实现任务调度；

所述数据智能处理系统包括：数据加载模块、生成神经网络构建参数模块、构建神经网络模块、神经网络模块和决策信息生成模块；

数据加载模块，通过信息传递系统读取数据，然后参照JSON配置文件对数据格式的描述对数据进行加载、解析，得到数据解析加载信息，并把资源需求信息数据通过预处理转换为向量列表的形式，加载为资源需求信息数据的内存向量表示并分配内存存储；

生成神经网络构建参数模块，根据数据解析加载信息，计算出神经网络的参数，所述神经网络的参数包括输入宽度、batch参数和输出宽度参数；

构建神经网络模块，根据计算神经网络的参数构建相应的神经网络；

神经网络模块，以加载数据，即资源需求信息数据的内存向量表示为训练的输入数据，通过反向传播算法对神经网络进行训练学习；

决策信息生成模块，使用决策信息生成函数的输出为输入，构造成列表List结构组织的数据格式，所述List的每个元素记录了任务类型、任务调度权重字段，以方便调度系统使用。

2.根据权利要求1所述的一种数据驱动可扩展的智能通用任务调度系统，其特征在于：所述应用信息收集系统，收集的信息类型、字段可按需配置。

3.根据权利要求1所述的一种数据驱动可扩展的智能通用任务调度系统，其特征在于：所述神经网络采用前馈神经网络FNN、递归神经网络RNN或LSTM神经网络。

4.根据权利要求1所述的一种数据驱动可扩展的智能通用任务调度系统，其特征在于：所述任务调度系统利用所述任务调度决策信息生成函数输出的决策信息为调度依据，实现任务调度的具体过程如下：

(1)读取决策信息生成函数的输出列表List，并按照列表元素的任务调度权重字段进行逆序排序；

(2)通知系统，选取排序后列表的第一个元素的任务类型作为下一个被调度任务类型；

(3)所述任务类型的第一个任务被调度。