[发明专利]神经网络模型获取方法及系统、数据处理方法在审
申请号: | 202110026477.7 | 申请日: | 2021-01-08 |
公开(公告)号: | CN112766476A | 公开(公告)日: | 2021-05-07 |
发明(设计)人: | 唐亮;刘松 | 申请(专利权)人: | 北京迈格威科技有限公司 |
主分类号: | G06N3/063 | 分类号: | G06N3/063;G06N3/04;G06N3/08;G06K9/62;G06F9/455 |
代理公司: | 北京钲霖知识产权代理有限公司 11722 | 代理人: | 李英艳;李志新 |
地址: | 100080 北京市海淀区科*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 神经网络 模型 获取 方法 系统 数据处理 | ||
1.一种由计算机执行的神经网络模型获取方法,应用于神经网络模型获取系统,所述神经网络模型获取系统至少包括:管理模块、参数获取模块、训练模块;其中,所述由计算机执行的神经网络模型获取方法包括:
步骤S11,通过所述管理模块接收所述参数获取模块发送的超参数,并发送所述超参数至所述训练模块;
步骤S12,通过所述训练模块基于所述超参数训练所述神经网络模型,确定训练评价信息,并将所述训练评价信息发送至所述管理模块;
步骤S13,通过所述管理模块发送所述训练评价信息至所述参数获取模块;
步骤S14,通过所述参数获取模块基于所述训练评价信息调整所述神经网模型的超参数,并将调整后的超参数发送至所述管理模块;
步骤S15,重复所述步骤S11至所述步骤S14,通过所述管理模块确定所述神经网络模型最终的超参数,并获取所述最终的超参数对应的神经网络模型。
2.根据权利要求1所述的由计算机执行的神经网络模型获取方法,其中,所述神经网络模型获取系统还包括:指令获取模块;所述由计算机执行的神经网络模型获取方法,还包括:
通过所述指令获取模块获取创建信息,并发送至所述管理模块,其中,所述创建信息包括神经网络模块的初始化信息及搜索范围;
通过所述管理模块发送所述创建信息至所述参数获取模块;
通过所述参数获取模块基于所述创建信息确定所述神经网络模型初始的超参数,并发送至所述管理模块。
3.根据权利要求1所述的由计算机执行的神经网络模型获取方法,其中,所述神经网络模型获取系统基于Kubernetes设置,所述训练模块包括多个job容器;所述步骤S12包括:通过任一所述job容器,基于所述超参数训练所述神经网络模型,确定所述训练评价信息。
4.根据权利要求1-3任一项所述的由计算机执行的神经网络模型获取方法,其中,所述神经网络模型获取系统还包括:存储模块;所述由计算机执行的神经网络模型获取方法,还包括:
所述管理模块将所述最终的超参数和/或所述最终的超参数对应的神经网络模型发送至所述存储模块。
5.根据权利要求4所述的由计算机执行的神经网络模型获取方法,其中,所述存储模块为分布式文件存储的数据库。
6.一种数据处理方法,其中,所述数据处理方法包括:
通过如权利要求1-5任一项所述的由计算机执行的神经网络模型获取方法,获取神经网络模型;
通过所述神经网络模型,进行数据处理。
7.根据权利要求6所述的数据处理方法,其中,所述通过所述神经网络模型,进行数据处理,包括:
通过所述神经网络模型,进行图像识别或图像分类。
8.一种神经网络模型获取系统,用于通过如权利要求1-5任一项所述的由计算机执行的神经网络模型获取方法,获取神经网络模型;其中,所述神经网络模型获取系统包括:管理模块、训练模块以及参数获取模块;
所述管理模块用于接收所述参数获取模块发送的超参数,并发送所述超参数至所述训练模块;
所述训练模块用于基于所述超参数训练所述神经网络模型,确定训练评价信息,并将所述训练评价信息发送至所述管理模块;
所述管理模块还用于发送所述训练评价信息至所述参数获取模块;
所述参数获取模块用于基于所述训练评价信息调整所述神经网模型的超参数,并将调整后的超参数发送至所述管理模块;
所述管理模块还用于确定所述神经网络模型最终的超参数,并获取所述最终的超参数对应的神经网络模型。
9.根据权利要求8所述的神经网络模型获取系统,其中,所述神经网络模型获取系统还包括:指令获取模块,用于获取创建信息,并发送至所述管理模块,其中,所述创建信息包括神经网络模型的初始化信息及搜索范围;
所述管理模块还用于:发送所述创建信息至所述参数获取模块;
所述参数获取模块还用于:基于所述创建信息确定所述神经网络模型初始的超参数,并发送至所述管理模块。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京迈格威科技有限公司,未经北京迈格威科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202110026477.7/1.html,转载请声明来源钻瓜专利网。