[发明专利]通用机器学习模型文件的生成方法、装置、存储介质有效
申请号: | 201811459679.5 | 申请日: | 2018-11-30 |
公开(公告)号: | CN111338630B | 公开(公告)日: | 2022-02-08 |
发明(设计)人: | 不公告发明人 | 申请(专利权)人: | 上海寒武纪信息科技有限公司 |
主分类号: | G06F8/41 | 分类号: | G06F8/41;G06F8/73;G06N20/00 |
代理公司: | 北京华进京联知识产权代理有限公司 11606 | 代理人: | 孙岩 |
地址: | 200120 上海市浦*** | 国省代码: | 上海;31 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 通用 机器 学习 模型 文件 生成 方法 装置 存储 介质 | ||
1.一种通用机器学习模型文件的生成方法,其特征在于,所述通用机器学习模型文件包括通用机器学习模型和模型目录,所述模型目录用于记录所述通用机器学习模型文件中所有模型的存放位置;所述生成方法包括:
获取所述通用机器学习模型;
计算所述通用机器学习模型的存储偏移量;其中,所述存储偏移量用于表征每个通用机器学习模型在所述通用机器学习模型文件中相对于最先存储的通用机器学习模型存储的相对位置;
根据所述通用机器学习模型以及所述通用机器学习模型存储偏移量,生成所述模型目录;
根据所述通用机器学习模型文件的属性信息、所述通用机器学习模型以及所述模型目录,生成所述通用机器学习模型文件。
2.根据权利要求1所述的生成方法,其特征在于,所述根据所述通用机器学习模型文件的属性信息、所述通用机器学习模型以及所述模型目录,生成所述通用机器学习模型文件,包括:
获取所述通用机器学习模型文件的文件头和文件尾;
根据所述文件头、所述模型目录、所述通用机器学习模型以及所述文件尾,生成所述通用机器学习模型文件。
3.根据权利要求1所述的生成方法,其特征在于,所述计算所述通用机器学习模型的存储偏移量的步骤包括:
获取每个所述通用机器学习模型占用的存储空间大小和所述通用机器学习模型的数量;
获取所述通用机器学习模型的存放顺序;
根据每个所述通用机器学习模型占用的存储空间大小、所述通用机器学习模型的数量、所述通用机器学习模型的存放顺序,计算每个所述通用机器学习模型的存储偏移量。
4.根据权利要求1所述的生成方法,其特征在于,所述根据所述通用机器学习模型文件的属性信息、所述通用机器学习模型以及所述模型目录,生成通用机器学习模型文件,包括:
创建所述通用机器学习模型文件的标识码;
根据所述标识码、所述通用机器学习模型、所述模型目录,生成所述通用机器学习模型文件。
5.根据权利要求1所述的生成方法,其特征在于,所述根据所述通用机器学习模型文件的属性信息、所述通用机器学习模型以及所述模型目录,生成所述通用机器学习模型文件,包括:
创建所述通用机器学习模型文件的校验码和/或纠错码;
根据所述通用机器学习模型文件的校验码和/或纠错码、所述通用机器学习模型以及所述模型目录,生成所述通用机器学习模型文件。
6.根据权利要求1所述的生成方法,其特征在于,所述根据所述通用机器学习模型文件的属性信息、所述通用机器学习模型以及所述模型目录,生成所述通用机器学习模型文件还包括:
计算所述通用机器学习模型文件所需占用的存储空间的大小;
根据所述通用机器学习模型、所述通用机器学习模型文件所需占用的存储空间的大小以及所述模型目录,生成通用机器学习模型文件。
7.一种通用机器学习模型文件的生成方法,其特征在于,所述生成方法包括:
获取机器学习任务的任务参数;
对所述任务参数进行分类,生成任务指令及模型参数;
在多核平台中,将核间不共享的数据对应的所述任务指令及模型参数进行汇集,生成栈数据,将核间共享的数据对应的所述任务指令及模型参数进行汇集,生成堆数据;
将所述栈数据和堆数据进行整合,生成通用机器学习模型;
计算所述通用机器学习模型的存储偏移量;
根据所述通用机器学习模型以及所述通用机器学习模型存储偏移量,生成模型目录;
根据所述通用机器学习模型文件的属性信息、所述通用机器学习模型、所述模型目录,生成通用机器学习模型文件。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于上海寒武纪信息科技有限公司,未经上海寒武纪信息科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201811459679.5/1.html,转载请声明来源钻瓜专利网。
- 上一篇:速通门控制装置及系统
- 下一篇:一种全流程收入稽核方法和装置