[发明专利]面向二值神经网络的二值化装置、方法及应用有效
申请号: | 201811041101.8 | 申请日: | 2018-09-07 |
公开(公告)号: | CN109308517B | 公开(公告)日: | 2021-08-24 |
发明(设计)人: | 韩银和;闵丰;许浩博;王颖 | 申请(专利权)人: | 中国科学院计算技术研究所 |
主分类号: | G06N3/04 | 分类号: | G06N3/04;G06N3/08 |
代理公司: | 北京泛华伟业知识产权代理有限公司 11280 | 代理人: | 王勇;李科 |
地址: | 100190 北*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 面向 神经网络 化装 方法 应用 | ||
1.一种面向二值神经网络的联合装置,包括:
数据接收单元,用于接收神经网络待二值化的非二值输入数据和预设的二值化参数,其中,所述非二值输入数据是神经元数据和/或权值数据和/或卷积运算结果;
二值化计算单元,用于针对所述输入数据执行二值化计算,所述二值化计算单元包括比较模块和赋值模块,其中,所述比较模块用于将非二值输入数据的每一位数值分别与所述预设的二值化参数相比较并获得比较结果,所述赋值模块根据所述比较结果将所述非二值输入数据的数据值对应转化为二值数据值;
数据输出单元,用于输出所述二值化计算单元获得的二值化结果;
激活单元,所述激活单元与所述数据接收单元相连,用于针对神经网络中待激活的向量运算结果执行激活运算,并将激活运算结果传输至所述数据接收单元;
参数调节单元,所述参数调节单元与所述数据接收单元相连,用于动态调节所述数据接收单元接收的所述预设的二值化参数以实现等效激活运算,其中,所述二值化参数根据所述非二值输入数据的值域范围进行预设,或根据所述非二值输入数据的分布规律进行预设。
2.根据权利要求1所述的联合装置,其特征在于,所述二值化参数为预设的阈值,所述比较模块将所述非二值输入数据的每一位 数值分别与所述阈值相比较,若所述非二值输入数据的数值大于或等于所述阈值,则所述赋值模块将所述数值对应转化为1,反之则为0。
3.根据权利要求2所述的联合装置,其特征在于,所述赋值模块根据所述非二值输入数据每一位 数值的正负对所述非二值输入数据进行转化;其中,若所述非二值输入数据的数值为正或为0,则对应转化为1;若所述非二值输入数据的数值为负,则对应转化为0。
4.一种利用如权利要求1-3任一项所述的联合装置针对二值化神经网络进行二值化的方法,包括以下步骤:
接收神经网络的待二值化的非二值输入数据和预设的二值化参数,其中所述待二值化的非二值输入数据能够被执行激活运算,所述预设的二值化参数能够被动态调节以实现等效激活运算,所述预设的二值化参数根据所述非二值输入数据的值域范围进行预设,或根据所述非二值输入数据的分布规律进行预设;
将所述非二值输入数据与所述预设二值化参数相比较并获得比较结果;
根据所述比较结果,将所述非二值和输入数据对应转化为二值数据并输出。
5.根据权利要求4所述的二值化方法,其特征在于,将所述非二值输入数据与所述预设二值化参数相比较并获得比较结果进一步包括:
将所述非二值输入数据的每一位数值分别与预设的二值化参数值进行比较。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中国科学院计算技术研究所,未经中国科学院计算技术研究所许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201811041101.8/1.html,转载请声明来源钻瓜专利网。