[发明专利]一种跨数据规模的配置参数的调优方法、装置及电子设备

权利要求书

1.一种跨数据规模的配置参数的调优方法，其特征在于，所述方法包括：

获取随机数生成的若干配置参数组，所述配置参数组包括若干配置参数；

根据所述配置参数组，运行给定的程序，确定不同的数据规模对应的运行时间；

根据所述不同的数据规模对应的运行时间，分别确定所述不同的数据规模对应的所述配置参数组中每个配置参数的重要性得分；

从各个数据规模对应的所述配置参数组中每个配置参数的重要性得分中，选取预设数量的公共的配置参数；

对所述预设数量的公共的配置参数，进行跨数据规模分析，预测所述预设数量的公共的配置参数的最优配置参数值；

根据所述最优配置参数值，确定跨数据规模的最优配置参数组。

2.根据权利要求1所述的方法，其特征在于，所述获取随机数生成的配置参数组，包括：

获取所述配置参数组中每个配置参数的取值范围；

根据所述每个配置参数的取值范围，生成各个配置参数。

3.根据权利要求1所述的方法，其特征在于，所述配置参数的类型包括：布尔型参数、类别型参数、连续型参数。

4.根据权利要求1所述的方法，其特征在于，所述数据规模的范围为[最小数据规模，最大数据规模]，其中，最大数据规模为最小数据规模的预设倍数。

5.根据权利要求1-4任一项所述的方法，其特征在于，所述根据所述不同的数据规模对应的运行时间，分别确定所述不同的数据规模对应的所述配置参数组中每个配置参数的重要性得分，包括：

将每个数据规模对应的配置参数组及运行时间，输入随机梯度增强回归树，得到对应数据规模的配置参数组中每个配置参数的重要性得分。

6.根据权利要求1-4任一项所述的方法，其特征在于，所述配置参数组包括非硬件型资源参数；

所述从各个数据规模对应的所述配置参数组中每个配置参数的重要性得分中，选取预设数量的公共的配置参数，包括：

从各个数据规模对应的所述配置参数组中每个配置参数的重要性得分中，选取预设数量的公共的所述非硬件资源型参数。

7.根据权利要求1-4任一项所述的方法，其特征在于，所述对所述预设数量的公共的配置参数，进行跨数据规模分析，预测所述预设数量的公共的配置参数的最优配置参数值，包括：

获取当前数据规模中所述配置参数组中最长的运行时间、最短的运行时间及每个配置参数组对应的运行时间；

根据所述最长的运行时间、最短的运行时间及每个配置参数组对应的运行时间，确定每个所述配置参数组对应的运行得分；

将每个所述配置参数组对应的运行得分作为所述配置参数组中每个所述配置参数的运行得分；

将对应的所述数据规模、所述配置参数的运行得分、所述配置参数的参数值，输入至线性回归模型，得到在当前数据规模下、运行得分最高时所述配置参数的取值，作为所述配置参数的最优配置参数值。

8.根据权利要求1-4任一项所述的方法，其特征在于，所述根据所述最优配置参数值，确定跨数据规模的最优配置参数组，包括：

获取所述预设数量的公共的配置参数之外的参数值；

求每个所述非公共的配置参数的参数值的平均值；

将所述平均值作为对应的各个所述非公共的配置参数的最优配置参数值；

根据所述非公共的配置参数的最优配置参数值和所述公共的配置参数的最优配置参数值，确定所述跨数据规模的最优配置参数组。