[发明专利]一种计算资源调整方法、装置以及相关设备有效
申请号: | 201810072678.9 | 申请日: | 2018-01-25 |
公开(公告)号: | CN110083448B | 公开(公告)日: | 2023-08-18 |
发明(设计)人: | 孟玉;王玉伟;张立鑫;于潇宇;高剑林;朱建平 | 申请(专利权)人: | 腾讯科技(深圳)有限公司;腾讯云计算(北京)有限责任公司 |
主分类号: | G06F9/50 | 分类号: | G06F9/50;G06N3/0464 |
代理公司: | 广州三环专利商标代理有限公司 44202 | 代理人: | 郝传鑫;熊永强 |
地址: | 518057 广东省深圳*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 计算 资源 调整 方法 装置 以及 相关 设备 | ||
本发明实施例公开了一种计算资源调整方法、装置以及相关设备,所述方法包括:获取目标池化层的期望池化耗时和目标池化层的待处理数据量,并获取用于进行池化处理的计算资源单位对应的当前时钟频率;根据所述目标池化层的期望池化耗时和所述目标池化层的待处理数据量,确定目标时钟频率;当所述目标池化层相关联的卷积层完成卷积处理,且所述当前时钟频率和所述目标时钟频率不同时,将所述当前时钟频率切换为所述目标时钟频率,并基于具有所述目标时钟频率的所述计算资源单位,在所述目标池化层进行池化处理。采用本发明,可以节约计算资源,提高计算资源的使用率。
技术领域
本发明涉及计算机技术领域,尤其涉及一种计算资源调整方法、装置以及相关设备。
背景技术
卷积神经网络(Convolution neural network,CNN)是人工神经网络的一种,现已成语音分析、图像识别、物体分类等领域的研究热点,它的权值共享网络结构使之更类似于生物神经网络,降低了网络模型的复杂度,减少了权值的数量。卷积神经网络主要是由卷积层和池化层(pooling)经过多种形式的堆叠形成,模型的深度也从十几层扩展到上百层。
随着模型深度的增加,对计算力的要求也逐渐增加。为了提高同一层算法的并行效率,要求同一层的卷积计算时间和池化计算时间相等或者相近。但算法中卷积计算和池化计算存在不均匀性,即是同一层的卷积计算量和池化计算量之间可能是正比例关系也可能是反比例关系。例如,第二层卷积计算量是第一层卷积计算量的2倍,但第二层池化计算量可能是第一层池化计算量的10倍,也可能是0.1倍。因此,若想要同一层的池化计算时间匹配卷积计算时间,只能优先满足条件最恶劣的场景要求,就会消耗大量的计算资源,而实际运行时存在计算资源空闲,造成计算资源的使用率低下。
发明内容
本发明实施例提供一种计算资源调整方法、装置以及相关设备,可以提高计算资源的使用率。
本发明一方面提供了一种计算资源调整方法,包括:
获取目标池化层的期望池化耗时和目标池化层的待处理数据量,并获取用于进行池化处理的计算资源单位对应的当前时钟频率;所述目标池化层的期望池化耗时与所述目标池化层相关联的卷积层的卷积预计耗时之间的差值小于时间阈值;
根据所述目标池化层的期望池化耗时和所述目标池化层的待处理数据量,确定目标时钟频率;
当所述目标池化层相关联的卷积层完成卷积处理,且所述当前时钟频率和所述目标时钟频率不同时,将所述当前时钟频率切换为所述目标时钟频率,并基于具有所述目标时钟频率的所述计算资源单位,在所述目标池化层进行池化处理。
其中,还包括:
预测多个卷积层的卷积预计耗时,并根据所述多个卷积层的卷积预计耗时确定多个池化层的期望池化耗时,并根据所述多个池化层的期望池化耗时确定池化期望值;
预测多个池化层的待处理数据量,根据所述多个池化层的待处理数据量确定基础池化数据量;
根据所述池化期望值、所述基础池化数据量、具有平均时钟频率的所述计算资源单位的计算能力值,确定用于进行池化处理的计算资源单位的数量;所述平均时钟频率是系统提供的多个时钟频率的平均值。
其中,所述根据所述多个卷积层的卷积预计耗时确定多个池化层的期望池化耗时,并根据所述多个池化层的期望池化耗时确定池化期望值,包括:
根据所述多个卷积层的卷积预计耗时确定所述多个池化层的期望池化耗时;位于相同层中的卷积层的卷积预计耗时和池化层的期望池化耗时之间的差值小于所述时间阈值;
计算所述多个池化层的期望池化耗时的平均值,并将所述平均值确定为所述池化期望值。
其中,所述根据所述多个池化层的待处理数据量确定基础池化数据量,具体包括:
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于腾讯科技(深圳)有限公司;腾讯云计算(北京)有限责任公司,未经腾讯科技(深圳)有限公司;腾讯云计算(北京)有限责任公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201810072678.9/2.html,转载请声明来源钻瓜专利网。
- 上一篇:一种中断处理方法及系统
- 下一篇:动态分配内存和处理器的方法、装置及计算模块