[发明专利]基于隐式空间映射的端到端边缘智能模型搜索方法和系统有效
申请号: | 202111334686.4 | 申请日: | 2021-11-11 |
公开(公告)号: | CN114168320B | 公开(公告)日: | 2022-11-15 |
发明(设计)人: | 蹇松雷;张钰森;谭郁松;黄辰林;李宝;董攀;丁滟;任怡;王晓川;张建锋;谭霜 | 申请(专利权)人: | 中国人民解放军国防科技大学 |
主分类号: | G06F9/50 | 分类号: | G06F9/50;G06N3/04;G06N3/08 |
代理公司: | 湖南兆弘专利事务所(普通合伙) 43008 | 代理人: | 谭武艺 |
地址: | 410073 湖南*** | 国省代码: | 湖南;43 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 基于 空间 映射 端到端 边缘 智能 模型 搜索 方法 系统 | ||
1.一种基于隐式空间映射的端到端边缘智能模型搜索方法,其特征在于,包括:
1)随机选择指定数量的神经网络结构作为搜索种子;
2)针对搜索种子,获取在隐空间内的连续表征表示ei;
3)计算搜索步长δi和搜索方向偏置λi两个超参数;基于隐空间内的连续表征表示计算搜索种子的模型精度、模型参数量的梯度;
4)基于搜索步长δi和搜索方向偏置λi两个超参数以及搜索种子的模型精度、模型参数量的梯度在隐空间内开展神经网络结构搜索,得到新搜索种子在隐空间内的连续表征表示e′i;
5)对新搜索种子在隐空间内的连续表征表示e′i解码重构为新搜索种子;
6)将新搜索种子与搜索种子进行对比,若相同则判定搜索失败,跳转执行步骤4)以重新搜索;否则,跳转执行下一步;
7)将新搜索种子加入搜索结果集合;
8)判断是否满足预设的终止条件,若不满足则更新搜索种子,跳转执行步骤2);否则,返回最终得到的搜索结果集合并退出。
2.根据权利要求1所述的基于隐式空间映射的端到端边缘智能模型搜索方法,其特征在于,步骤2)包括:
2.1)提取神经网络结构的内部拓扑结构信息;
2.2)基于内部拓扑结构信息构建神经网络结构的有向无环图DAG;
2.3)基于神经网络结构的有向无环图DAG,分别提取出邻接矩阵Madj和操作向量Vopt;
2.4)检查邻接矩阵Madj和操作向量Vopt的维度,若维度符合要求,则跳转执行下一步;否则对邻接矩阵Madj和操作向量Vopt进行维度填充处理,跳转执行步骤2.4);
2.5)基于邻接矩阵Madj和操作向量Vopt计算神经网络结构的编码向量Vnae;
2.6)基于神经网络结构的编码向量Vnae通过预先训练好的特征提取网络进行神经网络结构的特征提取,得到搜索种子在隐空间内的连续表征表示ei。
3.根据权利要求1所述的基于隐式空间映射的端到端边缘智能模型搜索方法,其特征在于,步骤3)中计算搜索步长δi和搜索方向偏置λi两个超参数包括:
3.1A)随机初始化搜索步长δi和搜索方向偏置λi;
3.2A)根据搜索步长δi和搜索方向偏置λi,得到新搜索种子在隐空间内的连续表征表示e′i;
3.3A)根据原始的搜索种子在隐空间内的连续表征表示ei、新搜索种子在隐空间内的连续表征表示e′i分别计算模型数量rgen、模型精度racc和模型参数量rpar;
3.4A)若模型数量rgen大于等于1则动态调整搜索步长δi,跳转执行步骤3.2A);若模型精度racc和模型参数量rpar两者之和rpre大于等于1则动态调整搜索方向偏置λi,跳转执行步骤3.2A);否则,跳转执行下一步;
3.5A)计算模型数量rgen、模型精度racc和模型参数量rpar三者之和,若三者之和满足终止条件,则输出最终得到的搜索步长δi和搜索方向偏置λi;否则,为搜索步长δi和搜索方向偏置λi两者中的至少一者添加扰动以更新取值,跳转执行步骤3.2A)。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中国人民解放军国防科技大学,未经中国人民解放军国防科技大学许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202111334686.4/1.html,转载请声明来源钻瓜专利网。