[发明专利]异步梯度平均的分布式随机梯度下降法在审
| 申请号： | 201780094579.4 | 申请日： | 2017-09-04 |
| 公开（公告）号： | CN111052155A | 公开（公告）日： | 2020-04-21 |
| 发明（设计）人： | 吴祖光;罗曼·塔利扬斯基;内坦·彼得弗洛恩德 | 申请（专利权）人： | 华为技术有限公司 |
| 主分类号： | G06N3/08 | 分类号： | G06N3/08;G06N20/00 |
| 代理公司： | 暂无信息 | 代理人： | 暂无信息 |
| 地址： | 518129 广东*** | 国省代码： | 广东;44 |
| 权利要求书： | 查看更多 | 说明书： | 查看更多 |
| 摘要： | 一种在多个计算节点上分布式训练机器学习模型的系统，包括：服务器，与多个计算节点连接，用于在多轮训练迭代中控制机器学习模型的训练。每轮训练迭代包括：指示每个计算节点通过如下方式对所述机器学习模型的相应本地副本进行训练：本地计算多个累积梯度中的相应累积梯度，每个累积梯度包括一个或多个梯度；从每个计算节点获取所述累积梯度；通过将所述机器学习模型与所述累积梯度的汇总值合并来创建更新的机器学习模型。其中，在获取和创建阶段，所述计算节点中的一个或多个计算节点计算新的相应累积梯度，所述新的相应累积梯度在下一轮训练迭代中与所述机器学习模型合并。 | ||
| 搜索关键词： | 异步 梯度 平均 分布式 随机 下降 | ||
【主权项】：
暂无信息
下载完整专利技术内容需要扣除积分，VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息，商用须获得专利权人授权。该专利全部权利属于华为技术有限公司，未经华为技术有限公司许可，擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作，请联系【客服】
本文链接：http://www.vipzhuanli.com/patent/201780094579.4/，转载请声明来源钻瓜专利网。
- 上一篇：Zn-Al-Mg系镀覆钢板
- 下一篇：用于制造部件的方法及其工具
