[发明专利]一种基于虚拟网络的分布式训练网络系统及通信方法有效
申请号: | 201911415826.3 | 申请日: | 2019-12-31 |
公开(公告)号: | CN113132138B | 公开(公告)日: | 2023-02-28 |
发明(设计)人: | 胡水海;孙军欢 | 申请(专利权)人: | 深圳致星科技有限公司 |
主分类号: | H04L41/12 | 分类号: | H04L41/12;H04L41/14;H04L9/40;H04L41/08;H04L41/042 |
代理公司: | 深圳市力道知识产权代理事务所(普通合伙) 44507 | 代理人: | 何姣 |
地址: | 518000 广东省深*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 基于 虚拟 网络 分布式 训练 系统 通信 方法 | ||
1.一种基于虚拟网络的分布式训练网络系统,其特征在于,包括:
若干个业务网络,所述的各业务网络为用于分布式训练过程中不同业务通信的逻辑网络;
以及诸业务网络控制器;其中,
所述的各业务网络,均分别包括工作节点和各自的业务网虚拟交换机;
在所述的各业务网络中,
所述的工作节点是指分布式训练过程中用于执行训练相关作业的节点,且所述的工作节点分别与其业务网虚拟交换机通过它们之间的链路相连;
所述的诸业务网络控制器,分别与工作节点的操作系统、各业务网络接口耦接;
且所述的诸业务网络控制器提供各业务网络在物理网络的并行传输、以及各业务网络的隔离。
2.根据权利要求1所述的基于虚拟网络的分布式训练网络系统,其特征在于,
对其中的关键的和/或敏感的业务网络节点间通信提供带宽保证或对其中的全部业务网络分别提供带宽保证:
即通过限制其他网络的带宽占用,以保障有足够的剩余带宽给被提供带宽保证的网络。
3.根据权利要求1所述的基于虚拟网络的分布式训练网络系统,其特征在于,
其中的诸业务网络控制器,包括若干组虚拟网络接口控制器;
分别将它们的一侧的虚拟网络接口控制器与工作节点的操作系统耦接;另一侧的虚拟网络接口控制器对应地与各业务网络接口耦接;
通过其接入控制,实现各业务网络的隔离。
4.根据权利要求1所述的基于虚拟网络的分布式训练网络系统,其特征在于,
其中的各业务网络,分别包括各自的宿主机内虚拟交换机;
宿主机内虚拟交换机一侧与宿主机内各工作节点的操作系统耦接,另一侧对应地与各业务网络接口耦接。
5.根据权利要求1所述的基于虚拟网络的分布式训练网络系统,其特征在于,
在其中的一些业务网络中,分别包括一个或多个参数服务器节点。
6.一种基于虚拟网络的分布式训练通信方法,其特征在于,包括:
在工作节点的宿主机上,运行诸业务网络控制器;
将诸业务网络控制器与工作节点的操作系统耦接;
且将诸业务网络控制器分别与不同的业务网络接口耦接;
诸业务网络控制器,使各业务网络在物理网络的并行传输;以及在逻辑上隔离地并行传输;
其中,各业务网络,均分别包括工作节点和各自的业务网虚拟交换机。
7.根据权利要求6所述的基于虚拟网络的分布式训练通信方法,其特征在于,
对其中的关键的和/或敏感的业务网络节点间通信提供带宽保证或对其中的全部业务网络分别提供带宽保证:
即通过限制其他网络的带宽占用,以保障有足够的剩余带宽给被提供带宽保证的网络。
8.根据权利要求6所述的基于虚拟网络的分布式训练通信方法,其特征在于,
提供若干组虚拟网络接口控制器;
分别将它们的一侧的虚拟网络接口控制器与工作节点的操作系统耦接;另一侧的虚拟网络接口控制器对应地与各业务网络接口耦接;
通过其接入控制,实现各业务网络的隔离。
9.根据权利要求6所述的基于虚拟网络的分布式训练通信方法,其特征在于,
在各业务网络中,通过其各自的宿主机内虚拟交换机实现宿主机内工作节点间的通信:
将宿主机内虚拟交换机一侧与宿主机内各工作节点的操作系统耦接,另一侧对应地与各业务网络接口耦接,实现所述各工作节点间的通信。
10.根据权利要求6所述的基于虚拟网络的分布式训练通信方法,其特征在于,
在其中的一些业务网络汇总,接入一个或多个参数服务器节点,用于参数聚合。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于深圳致星科技有限公司,未经深圳致星科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201911415826.3/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种用于大温度范围湿度调节系统
- 下一篇:一种电子设备及计算机系统