[发明专利]一种无监督机器学习的超参数自动优化方法及系统在审
申请号: | 201711347747.4 | 申请日: | 2017-12-15 |
公开(公告)号: | CN108062587A | 公开(公告)日: | 2018-05-22 |
发明(设计)人: | 王建民;龙明盛;付博;黄向东 | 申请(专利权)人: | 清华大学 |
主分类号: | G06N99/00 | 分类号: | G06N99/00;G06N3/08 |
代理公司: | 北京路浩知识产权代理有限公司 11002 | 代理人: | 王莹;吴欢燕 |
地址: | 100084 北京市海*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 监督 机器 学习 参数 自动 优化 方法 系统 | ||
1.一种无监督机器学习的超参数自动优化方法,其特征在于,包括:
根据无监督机器学习算法确定所述无监督机器学习算法的算法性能评估模型、所述无监督机器学习算法的超参数、所述超参数的搜索空间和所述超参数优化的评价准则;
根据所述算法性能评估模型、所述搜索空间和所述评价准则确定所述超参数的最优值。
2.根据权利要求1所述的方法,其特征在于,所述根据无监督机器学习算法确定所述无监督机器学习算法的算法性能评估模型、所述无监督机器学习算法的超参数、所述超参数的搜索空间和所述超参数优化的评价准则具体为:
根据无监督机器学习算法在预设知识库中查找所述无监督机器学习算法的算法性能评估模型和所述无监督机器学习算法的超参数,以及所述超参数的搜索空间和所述超参数优化的评价准则;其中,所述预设知识库存储有无监督机器学习算法,以及与所述无监督机器学习算法对应的算法性能评估模型、超参数、超参数的搜索空间和超参数优化的评价准则。
3.根据权利要求2所述的方法,其特征在于,所述预设知识库中存储的无监督机器学习算法超参数的搜索空间根据经验值确定。
4.根据权利要求1所述的方法,其特征在于,所述根据所述算法性能评估模型、所述搜索空间和所述评价准则确定所述超参数的最优值,包括:
根据所述搜索空间,利用所述评价准则,获取多组所述超参数的初始值;
将每组超参数的初始值分别输入至所述无监督机器学习算法,获取多组包含超参数初始值的无监督机器学习算法;
对每组包含超参数初始值的无监督机器学习算法进行训练,获取训练结果;
根据所述训练结果,利用所述算法性能评估模型,确定超参数的最优值,其中,所述超参数的最优值为算法性能最优的一组超参数的初始值。
5.根据权利要求2或3任一项所述的方法,其特征在于,所述预设知识库中存储的无监督机器学习算法至少包括:k中心点算法、CLANRANS算法、平均迭代规约和聚类算法、代表点聚类算法、动态模型算法、高密度连接区域算法、密度分布函数算法、对象排序识别算法、统计信息网络算法、聚类高维空间算法、小波变化算法、Affinity propagation算法、Mean-shift算法、Spectral clustering算法、Ward hierarchical clustering算法、Agglomerative clustering算法。
6.根据权利要求2或3任一项所述的方法,其特征在于,所述预设知识库中存储的无监督机器学习算法超参数优化的评价准则至少包括:赤池信息量准则、贝叶斯信息准则、偏差信息准则。
7.根据权利要求2或3任一项所述的方法,其特征在于,所述预设知识库中存储的无监督机器学习算法的算法性能评估模型至少包括:受试者工作特征曲线模型和聚类有效性分析模型。
8.一种无监督机器学习的超参数自动优化系统,其特征在于,包括:
查询模块,用于根据无监督机器学习算法确定所述无监督机器学习算法的算法性能评估模型、所述无监督机器学习算法的超参数、所述超参数的搜索空间和所述超参数优化的评价准则;
优化模块,用于根据所述算法性能评估模型、所述搜索空间和所述评价准则确定所述超参数的最优值。
9.一种用于自动优化无监督机器学习的超参数的电子设备,其特征在于,包括:
存储器和处理器,所述处理器和所述存储器通过总线完成相互间的通信;所述存储器存储有可被所述处理器执行的程序指令,所述处理器调用所述程序指令能够执行如权利要求1至7任一所述的方法。
10.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现如权利要求1至7任一所述的方法。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于清华大学,未经清华大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201711347747.4/1.html,转载请声明来源钻瓜专利网。
- 上一篇:高速自动四除机
- 下一篇:一种多层次的小麦颗粒筛选装置