[发明专利]数据处理方法、装置、电子设备及存储介质在审
申请号: | 202011064115.9 | 申请日: | 2020-09-30 |
公开(公告)号: | CN112036561A | 公开(公告)日: | 2020-12-04 |
发明(设计)人: | 王春杰;王天飞;郑文明;朱琳;韩布和;秦雷;陈振;王磊;张红光;忻舟 | 申请(专利权)人: | 北京百度网讯科技有限公司 |
主分类号: | G06N3/063 | 分类号: | G06N3/063;G06N3/04;G06N3/08;G06K9/62 |
代理公司: | 北京市铸成律师事务所 11313 | 代理人: | 杨瑾瑾;林军 |
地址: | 100085 北京市*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 数据处理 方法 装置 电子设备 存储 介质 | ||
1.一种数据处理方法,所述方法包括:
获取输入芯片的待处理数据;
响应于对所述待处理数据的数据分类操作,根据连接于分类网络输出端的分类器进行分类运算,得到指数运算指令;
将所述指数运算指令划分为指数归一化指令及占比指令;
分别执行所述指数归一化指令及所述占比指令的过程中,通过共享内存的方式进行与分类相关的数据读写操作,所述数据读写操作结束后,将针对所述待处理数据的分类结果写入所述内存。
2.根据权利要求1所述的方法,其中,所述分别执行所述指数归一化指令及所述占比指令的过程中,通过共享内存的方式进行与分类相关的数据读写操作,包括:
分别执行所述指数归一化指令及所述占比指令的过程中,以分时复用的方式共享所述内存;
从所述内存读取当前数据,根据所述当前数据进行与分类相关的数据读写操作,以得到所述分类结果。
3.根据权利要求1或2所述的方法,还包括:
执行所述指数归一化指令的过程中,对归一化指数softmax层输入的数据进行求取最大值的运算、减最大值运算及指数运算;其中,
通过所述求取最大值的运算,确定针对输入的所述数据的范围上限;
通过所述减最大值运算,缩小所述分类结果所适用的数据范围,以支持定点数的运算;
通过所述指数运算,将针对所述分类结果的指数运算控制在0到1的数据范围内。
4.根据权利要求3所述的方法,所述执行所述指数归一化指令的过程中,对归一化指数softmax层输入的数据进行求取最大值的运算、减最大值运算及指数运算,包括:
在指定维度方向上进行所述求取最大值的运算,得到最大值;
将当前维度方向得到的维度向量缓存入所述内存中;
从所述内存中读取所述维度向量,根据所述维度向量和所述最大值进行所述减最大值运算,得到待定值;
对所述待定值基于浮点数进行所述指数运算,得到浮点数形式的指数运算结果,将所述浮点数形式的指数运算结果,通过浮点数转定点数的操作进行转换,得到定点数形式的指数运算结果,并写入所述内存。
5.根据权利要求4所述的方法,还包括:
执行所述占比指令的过程中,从所述内存中获取所述定点数形式的指数运算结果并进行求和的累加运算,得到定点数形式的累加运算结果;
将所述定点数形式的累加运算结果,通过定点数转浮点数的操作进行转换,得到浮点数形式的累加运算结果并进行取倒数的操作,得到浮点数形式的累加和的倒数;
将所述浮点数形式的累加和的倒数,作为所述分类结果并写入所述内存。
6.一种数据处理装置,所述装置包括:
数据获取模块,用于获取输入芯片的待处理数据;
指令获取模块,用于响应于对所述待处理数据的数据分类操作,根据连接于分类网络输出端的分类器进行分类运算,得到指数运算指令;
指令拆分模块,用于将所述指数运算指令划分为指数归一化指令及占比指令;
读写模块,用于分别执行所述指数归一化指令及所述占比指令的过程中,通过共享内存的方式进行与分类相关的数据读写操作,所述数据读写操作结束后,将针对所述待处理数据的分类结果写入所述内存。
7.根据权利要求6所述的装置,其中,所述读写模块,用于:
分别执行所述指数归一化指令及所述占比指令的过程中,以分时复用的方式共享所述内存;
从所述内存读取当前数据,根据所述当前数据进行与分类相关的数据读写操作,以得到所述分类结果。
8.根据权利要求6或7所述的装置,还包括第一运算模块,用于:
执行所述指数归一化指令的过程中,对归一化指数softmax层输入的数据进行求取最大值的运算、减最大值运算及指数运算;其中,
通过所述求取最大值的运算,确定针对输入的所述数据的范围上限;
通过所述减最大值运算,缩小所述分类结果所适用的数据范围,以支持定点数的运算;
通过所述指数运算,将针对所述分类结果的指数运算控制在0到1的数据范围内。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京百度网讯科技有限公司,未经北京百度网讯科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202011064115.9/1.html,转载请声明来源钻瓜专利网。