[发明专利]超参数确定方法、装置、计算机设备和存储介质有效
申请号: | 201911257367.0 | 申请日: | 2019-12-10 |
公开(公告)号: | CN111061875B | 公开(公告)日: | 2023-09-15 |
发明(设计)人: | 侯皓龄;胡毅奇 | 申请(专利权)人: | 深圳追一科技有限公司 |
主分类号: | G06F16/35 | 分类号: | G06F16/35 |
代理公司: | 华进联合专利商标代理有限公司 44224 | 代理人: | 董慧 |
地址: | 518051 广东省深圳市南山区粤海街道*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 参数 确定 方法 装置 计算机 设备 存储 介质 | ||
1.一种超参数确定方法,其特征在于,应用于Python环境,Python环境中包括进程池、通信管理器以及调参组件,所述进程池和所述通信管理器分别为Python主程序中内置的多进程调度工具multiprocessing中的进程池multiprocessing.Pool和通信管理器multiproceesing.Manager;所述通信管理器用于实现所述进程池与所述调参组件之间的通信;
所述方法包括:
所述通信管理器从所述调参组件获取参数组,将所述参数组以及参数组标识输入所述进程池的进程中;其中,所述进程池的进程根据所述参数组对模型进行验证,得到验证分数;当所述进程池的进程输出验证分数后,所述进程池的进程结束;在所述进程池的任务还未结束的情况下,所述进程池启动新的进程,得到所述进程池新增的进程;
当获取到所述进程池输出的验证分数时,将所述参数组标识以及所述验证分数发送至所述调参组件,其中,所述调参组件根据所述参数组标识以及所述验证分数获取更新后的参数组;
在所述进程池新增的进程向所述通信管理器请求参数组的情况下,从所述调参组件获取所述更新后的参数组,将所述更新后的参数组以及参数组标识输入所述进程池新增的进程中;
当检测到所述进程池的任务结束时,从所述调参组件获取最终更新的参数组。
2.根据权利要求1所述的方法,其特征在于,所述通信管理器从所述调参组件获取参数组,将所述参数组以及参数组标识输入所述进程池的进程中,包括:
当所述通信管理器首次从所述调参组件获取所述参数组时,获取所述进程池的初始进程数量;
根据所述初始进程数量确定所述参数组的初始参数数量,将所述初始参数数量发送至所述调参组件,其中,所述调参组件生成所述初始参数数量的参数组;
从所述调参组件中获取所述初始参数数量的参数组,将所述初始参数数量的参数组以及参数组标识分别输入所述进程池的各个进程中。
3.根据权利要求1所述的方法,其特征在于,所述调参组件根据所述参数组标识以及所述验证分数获取更新后的参数组,包括:
所述调参组件根据所述参数组标识以及所述验证分数确定更新路径,所述更新路径上包括至少两个待选的参数组;
所述调参组件在所述更新路径上确定所述更新后的参数组。
4.根据权利要求1所述的方法,其特征在于,所述方法还包括:
当接收到所述进程池发送的结束信息时,判定所述进程池的任务结束,其中,当所述进程池的进程数量达到预设数量时,生成所述结束信息,并将所述结束信息发送给所述通信管理器。
5.根据权利要求1所述的方法,其特征在于,所述方法还包括:
当检测到所述进程池连续预设次数输出的验证分数均大于预设分数时,生成结束指令,将所述结束指令发送至所述进程池,所述结束指令用于指示所述进程池停止新增进程。
6.根据权利要求1所述的方法,其特征在于,所述最终更新的参数组为所述验证分数满足预设条件的参数组。
7.根据权利要求6所述的方法,其特征在于,所述预设条件为所述验证分数最高。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于深圳追一科技有限公司,未经深圳追一科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201911257367.0/1.html,转载请声明来源钻瓜专利网。