[发明专利]基于NFDT的分布式训练框架构建方法、分布式训练方法及系统在审
申请号: | 202010523162.9 | 申请日: | 2020-06-10 |
公开(公告)号: | CN111767034A | 公开(公告)日: | 2020-10-13 |
发明(设计)人: | 兰毅 | 申请(专利权)人: | 钛星投资(深圳)有限公司 |
主分类号: | G06F8/30 | 分类号: | G06F8/30;G06F9/448;G06K9/62;G06N20/00 |
代理公司: | 重庆双马智翔专利代理事务所(普通合伙) 50241 | 代理人: | 顾晓玲 |
地址: | 518052 广东省深圳市*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明公开了一种基于NFDT的分布式训练框架构建方法、分布式训练方法及系统,该分布式训练方法包括如下步骤:单机用户将数据集和代码存储于集群网络中并生成唯一hash值;分布式训练模块接收任务需求对应的hash值从集群网络下载数据集和单机版代码;分布式训练模块利用单机版代码生成分布式训练框架;分布式训练框架调用计算资源进行分布式训练。本发明的用户只需要上传自己的数据集和单机训练代码,利用去中心化存储方式将训练任务压缩到集群中,集群中对应的训练设备根据收到的hash值将其解压,保证了训练的安全性和数据可靠性。本发明的NFDT框架对单机版训练过程中产生的模型文件进行模型解读和分析,实现单机版代码结构到分布式的训练功能。 | ||
搜索关键词: | 基于 nfdt 分布式 训练 框架 构建 方法 系统 | ||
【主权项】:
暂无信息
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于钛星投资(深圳)有限公司,未经钛星投资(深圳)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/202010523162.9/,转载请声明来源钻瓜专利网。
- 上一篇:去中心化存储方法、下载方法及存储系统
- 下一篇:幕墙变形缝节点结构