[发明专利]一种基于Mesos的分布式超参数优化系统及方法

权利要求书

1.一种基于Mesos的分布式超参数优化系统，包括计算层和调度层，其特征在于，所述计算层与分布式的超参数优化算法相结合，所述计算层由各类优化算法组成，用于进行分布式超参数优化的采样和生成计算任务，所述调度层是一个Mesos运行框架的具体实现，主要负责资源分配和执行计算任务；

所述计算层由主应用和从应用组成，使用主从架构，所述主应用负责运行超参数优化算法，所述从应用负责运行人工智能算法训练程序，所述调度层由客户端、调度器、执行器构成，所述客户端供用户使用，所述调度器负责系统资源的调度，所述执行器负责计算层任务的执行，各部分之间通过网络进行通信连接。

2.根据权利要求1所述的一种基于Mesos的分布式超参数优化系统，其特征在于，所述计算层运行过程中仅有一个主应用，根据用户需求会有一个或者多个从应用进行计算。

3.一种基于Mesos的分布式超参数优化方法，所述方法包括以下步骤：

(1)用户指定需要优化的人工智能程序，并配置需要优化的超参数，通过系统提交任务给Mesos集群；

(2)调度层集成的调度算法根据用户提交任务的资源需求以及任务的运行状况为其分配集群资源，启动计算层各个组件；

(3)计算层首先启动主应用按照用户的配置进行超参数优化，并向调度层申请新的资源来运行从应用，从应用负责根据主应用提供的参数进行计算，并将计算结果反馈至主应用判断是否符合用户的停止要求；

(4)最后当主应用达到用户停止要求时，将超参数优化结果返回用户，作业结束。