[发明专利]模型压缩方法、装置、计算机设备及存储介质有效
申请号: | 201910218338.7 | 申请日: | 2019-03-21 |
公开(公告)号: | CN109934300B | 公开(公告)日: | 2023-08-25 |
发明(设计)人: | 王文全;葛彦昊;曹赟;李季檩;李绍欣;汪铖杰;陈超 | 申请(专利权)人: | 腾讯科技(深圳)有限公司 |
主分类号: | G06V10/774 | 分类号: | G06V10/774;G06V10/74;G06V40/16 |
代理公司: | 北京三高永信知识产权代理有限责任公司 11138 | 代理人: | 张所明 |
地址: | 518057 广东省深圳*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 模型 压缩 方法 装置 计算机 设备 存储 介质 | ||
1.一种模型压缩方法,其特征在于,所述方法包括:
基于用于进行脸部识别的第一识别模型,获取第二初始模型;
基于所述第一识别模型,对所述第二初始模型进行训练,得到第二识别模型;
删除所述第二识别模型中的目标转化层,得到目标识别模型,以实现对所述第一识别模型的压缩;
获取待识别的脸部图像;
将所述待识别的脸部图像输入所述目标识别模型,输出所述目标识别模型对所述脸部图像的识别结果;
所述第二初始模型的第一特征层中的特征通道数小于所述第一识别模型的第一特征层的特征通道数,且,所述第二初始模型包括所述目标转化层,所述目标转化层用于将所述第二初始模型的第一特征层的特征数转化为所述第一识别模型的第一特征层的特征通道数。
2.根据权利要求1所述的方法,其特征在于,所述基于用于进行脸部识别的第一识别模型,获取第二初始模型包括:
删除所述第一识别模型的所述第一特征层中的第一特征通道;
在删除后的第一识别模型中添加所述目标转化层,得到所述第二初始模型。
3.根据权利要求2所述的方法,其特征在于,所述删除所述第一识别模型的所述第一特征层中的第一特征通道包括:
确定所述第一识别模型中待缩减的第一特征层;
确定所述待缩减的第一特征层包括的每个特征通道的影响值;
根据所述待缩减的第一特征层包括的每个特征通道的影响值,删除所述待缩减的第一特征层中影响值满足删除条件的第一特征通道。
4.根据权利要求3所述的方法,其特征在于,所述确定所述第一识别模型中待缩减的第一特征层包括下述任一步骤:
基于所述第一识别模型中每个特征层在所述第一识别模型中的排序位置,确定所述第一识别模型中待缩减的第一特征层;
基于所述第一识别模型中每个特征层所包括的特征通道的数量,确定所述第一识别模型中待缩减的第一特征层。
5.根据权利要求3所述的方法,其特征在于,所述确定所述待缩减的第一特征层包括的每个特征通道的影响值包括下述任一步骤:
对于所述每个特征通道,获取所述每个特征通道的至少一个参数,确定所述至少一个参数的和值,将所述至少一个参数的和值确定为所述每个特征通道的影响值;
对于所述每个特征通道,确定所述待缩减的第一特征层在所述每个特征通道删除前后的损失值,将所述损失值确定为所述每个特征通道的影响值。
6.根据权利要求2所述的方法,其特征在于,所述在删除后的第一识别模型中添加所述目标转化层,得到所述第二初始模型包括:
根据所述第一识别模型中第一特征层删除所述第一特征通道之前,所述第一特征层包括的原通道数量,获取包括原通道数量的特征通道的目标转化层;
将所述目标转化层添加至所述第一识别模型中第一特征层之后,得到所述第二初始模型。
7.根据权利要求1所述的方法,其特征在于,所述基于所述第一识别模型,对所述第二初始模型进行训练,得到第二识别模型包括:
将样本脸部图像输入所述第一识别模型和所述第二初始模型;
基于所述样本脸部图像,分别获取第一相似度以及第二相似度,所述第一相似度为所述第一识别模型和所述第二初始模型中对应特征层的输出特征之间的相似度,所述第二相似度为第一识别结果和第二识别结果的相似度,所述第一识别结果和所述第二识别结果分别为所述第一识别模型和所述第二初始模型输出的识别结果;
基于所述第一相似度和所述第二相似度,对所述第二初始模型的模型参数进行调整,直至符合目标条件时停止调整,输出所述第二识别模型。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于腾讯科技(深圳)有限公司,未经腾讯科技(深圳)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910218338.7/1.html,转载请声明来源钻瓜专利网。