[发明专利]一种数据同步的方法和网络系统在审
申请号: | 202211511012.1 | 申请日: | 2022-11-29 |
公开(公告)号: | CN116032944A | 公开(公告)日: | 2023-04-28 |
发明(设计)人: | 郑上闽 | 申请(专利权)人: | 新华三技术有限公司 |
主分类号: | H04L67/1095 | 分类号: | H04L67/1095;H04L41/12;H04L41/14;G06F15/173 |
代理公司: | 暂无信息 | 代理人: | 暂无信息 |
地址: | 310052 浙*** | 国省代码: | 浙江;33 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 数据 同步 方法 网络 系统 | ||
1.一种数据同步的方法,其特征在于,所述方法应用于包含两个或两个以上处理服务器网络中,其中,每个处理服务器包括两个或两个以上GPU,所述方法包括:
各GPU以所属的处理服务器为单元进行单元内数据同步,将同步后的数据作为第一同步数据;
各GPU与其它处理服务器中的GPU针对第一同步数据进行单元间数据同步,将同步后的数据作为第二同步数据;
各GPU以所属的处理服务器为单元对第二同步数据进行单元内数据同步,以完成各GPU间的数据同步。
2.根据权利要求1所述的方法,其特征在于,所述各GPU以所属的处理服务器为单元进行单元内数据同步,将同步后的数据作为第一同步数据,包括:
对单元中的各GPU进行分组;
利用高速互联通道对分组后的各GPU进行组间数据同步。
3.根据权利要求2所述的方法,其特征在于,所述对单元中的各GPU进行分组,包括:
每次同步前将单元中的各GPU按照N/2分组,其中N为单元中GPU的数量;
所述对分组后的各GPU进行组间数据同步,包括:
按照[(n-1)mod 2^i=0,(n-1)mod 2^i=2^(i-1))的节点,与n+2^(i-1)的节点进行组间数据同步和[(n-1)mod 2^i=2^(i-1),(n-1)mod 2^i=2^i)的节点,与n-2^(i-1)的节点进行组间数据同步。
4.根据权利要求1所述的方法,其特征在于,所述各GPU与其它处理服务器中的GPU针对第一同步数据进行单元间数据同步,包括:
按第一规则将各处理服务器和与各处理服务器连接的交换机分层;
按第二规则对每层中的处理服务器进行分组;
以每层中的每组为单位进行层间数据同步,得到层间同步数据;
对层间同步数据进行相邻处理服务器间数据补齐,得到第二同步数据;
其中,所述交换机与各处理服务器间为背靠背组网;
每台处理服务器分别连接两台交换机。
5.根据权利要求4所述的方法,其特征在于,所述按第一规则将各处理服务器和与各处理服务器连接的交换机分层,包括:
获取网络处理服务器个数和与处理服务器连接的交换机个数;
通过数学运算将处理服务器个数和交换机个数拆分,并根据拆分后的结果对处理服务器和交换机分层。
6.根据权利要求4所述的方法,其特征在于,按第二规则对每层中的处理服务器进行分组,包括:
按每层处理服务器的奇偶编号进行分组。
7.根据权利要求4所述的方法,其特征在于,所述每台处理服务器分别连接两台交换机,包括:
每台处理服务器中的GPU通过对应的网卡连接两台交换机。
8.根据权利要求7所述的方法,其特征在于,所述每台处理服务器中的GPU通过对应的网卡连接两台交换机,包括:
每台处理服务器中编号为奇数的GPU连接一个交换机,编号为偶数的GPU连接另一个交换机。
9.根据权利要求1所述的方法,其特征在于,各GPU以所属的处理服务器为单元对第二同步数据进行单元内数据同步,包括:
各GPU以所属的处理服务器为单元,利用高速互联通道对第二同步数据进行单元内数据同步。
10.一种网络系统,其特征在于,所述网络系统包括:若干处理服务器,每个处理服务器包括两个或两个以上GPU,所述若干处理服务器通过多个交换机连接,其中,每个处理服务器同时连接两个或两个以上交换机,其中,交换机以背靠背方式组网;
各GPU以所属的处理服务器为单元进行单元内数据同步,将同步后的数据作为第一同步数据;
各GPU与处理服务器中的GPU针对第一同步数据进行单元间数据同步,将同步后的数据作为第二同步数据;
各GPU以所属的处理服务器为单元对第二同步数据进行单元内数据同步,以完成各GPU间的数据同步。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于新华三技术有限公司,未经新华三技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202211511012.1/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种防潮格拉辛离型纸的制备方法
- 下一篇:一种引流吸痰装置
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置