[发明专利]基于远程直接数据存取的数据传输方法、装置以及设备有效
申请号: | 202210557202.0 | 申请日: | 2022-05-20 |
公开(公告)号: | CN114979001B | 公开(公告)日: | 2023-06-13 |
发明(设计)人: | 曹颖;钱远盼;李兆耕;程钢 | 申请(专利权)人: | 北京百度网讯科技有限公司 |
主分类号: | H04L47/10 | 分类号: | H04L47/10;H04L47/125;H04L47/215;H04L47/62 |
代理公司: | 北京品源专利代理有限公司 11332 | 代理人: | 郭德霞 |
地址: | 100085 北京市*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 基于 远程 直接 数据 存取 数据传输 方法 装置 以及 设备 | ||
本公开提供了一种基于远程直接数据存取的数据传输方法、装置以及设备,涉及计算机技术领域,尤其涉及数据传输技术领域。具体实现方案为:将多个发送队列中指向同一响应端的各发送WQE,调度至与同一端对端共享发送队列匹配的多个端对端发送子队列中;对每个端对端发送子队列中的发送WQE进行按序处理,形成与发送WQE匹配的发送报文;将各发送报文按照由路由区分标识确定的传输路径,发送至与发送报文中的对端地址标识匹配的响应端,以指示响应端将发送报文中的负载信息进行内存写入,本公开实施例的技术方案提供一种RDMA通信负载均衡传输解决方案,有效缓解RDMA网络拥塞,提升RDMA网络的整体性能。
技术领域
本公开涉及计算机技术领域,具体涉及数据传输技术领域,尤其涉及一种基于远程直接数据存取的数据传输方法、装置以及设备。
背景技术
RDMA(Remote Direct Memory Access,远程直接数据存取)具有高带宽、低时延、bypass Kenerl等特点,采用RDMA通信技术可以提高系统吞吐量、降低系统的网络通信延迟,目前在数据中心存储与计算网络中已有广泛应用。
现有的RDMA通信技术,IB(Infiniband,无限带宽)协议提出的RC(ReliableConnections,可靠连接)服务在大规模部署RDMA网络中,对内存资源开销太大,对应用软件的部署不友好;IB协议提出的UD(Unreliable Datagram,不可靠数据包)服务,虽然能解决内存资源开销问题,但是其不可靠传输,需上层应用来确保数据传输可靠性的特点,对应用软件来说不友好。
因此,在IB RD协议的基础上,提出了XRD协议与XRD协议相关问题的解决方案。但是又因为网络传输中ECMP(Equal-Cost Multipath Routing,等价路由)存在哈希冲突的问题,导致在大规模RDMA网络中出现的拥塞;当出现网络拥塞导致丢包时,RDMA带宽急剧下来,通信时延变大,给业务带来不好的体验。
发明内容
本公开提供了一种基于远程直接数据存取的数据传输方法、装置以及设备。
根据本公开的一方面,提供了一种基于远程直接数据存取的数据传输方法,由请求端执行,包括:
将多个发送队列中指向同一响应端的各发送WQE(Work Queue Element,工作队列元素),调度至与同一端对端共享发送队列匹配的多个端对端发送子队列中;
其中,与同一端对端共享发送队列匹配的不同端对端发送子队列具有不同的路由区分标识;
对每个端对端发送子队列中的发送WQE进行按序处理,形成与发送WQE匹配的发送报文;
将各发送报文按照由路由区分标识确定的传输路径,发送至与发送报文中的对端地址标识匹配的响应端,以指示响应端将发送报文中的负载信息进行内存写入。
根据本公开的另一方面,提供了一种基于远程直接数据存取的数据传输方法,由响应端执行,包括:
在接收到请求端发送的目标发送报文时,根据目标发送报文中的共享队列标识和子队列标识,确定目标端对端接收子队列;
检测目标端对端接收子队列中是否存储与目标发送报文对应的目标接收WQE;
若否,则从多个接收队列中获取目标接收WQE调度至目标端对端接收子队列中;
根据目标端对端接收子队列中的目标接收WQE,将目标发送报文中的负载信息进行内存写入。
根据本公开的另一方面,提供了一种基于远程直接数据存取的数据传输装置,由请求端执行,包括:
发送元素调度模块,用于将多个发送队列中指向同一响应端的各发送WQE,调度至与同一端对端共享发送队列匹配的多个端对端发送子队列中;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京百度网讯科技有限公司,未经北京百度网讯科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202210557202.0/2.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置