[发明专利]提高基于ZFS文件系统异步远程复制的方法及系统在审

专利信息
申请号: 202010934884.3 申请日: 2020-09-08
公开(公告)号: CN112069146A 公开(公告)日: 2020-12-11
发明(设计)人: 于召鑫;李婷;陈凯余;晁永祺;王道邦;周泽湘;仇悦;文中领 申请(专利权)人: 北京同有飞骥科技股份有限公司
主分类号: G06F16/182 分类号: G06F16/182
代理公司: 北京方韬法业专利代理事务所(普通合伙) 11303 代理人: 党小林
地址: 100000 北京市海淀*** 国省代码: 北京;11
权利要求书: 查看更多 说明书: 查看更多
摘要:
搜索关键词: 提高 基于 zfs 文件系统 异步 远程 复制 方法 系统
【说明书】:

发明提供了一种提高基于ZFS文件系统异步远程复制的方法及系统。该方法包括:传输节点发起向接收节点的socket连接,并在发起socket连接之后输出文件句柄;接收节点进行socket连接监听,并在监听到socket连接后输出文件句柄;传输节点和接收节点根据各自持有的文件句柄,执行通过socket连接的异步远程复制。本发明提供的提高基于ZFS文件系统异步远程复制的方法及系统减少了数据拷贝次数,特别是去除了内核空间与用户空间之间的拷贝,提高了跨节点远程复制性能。

技术领域

本发明涉及数据存储技术领域,特别是涉及一种提高基于ZFS文件系统异步远程复制的方法及系统。

背景技术

存储系统是指计算机中由存放程序和数据的各种存储设备、控制部件及管理信息调度的设备(硬件)和算法(软件)所组成的系统。其中存储文件系统在整个存储系统里面至关重要。相对于传统的EXT、XFS、JFS、ReiserFS或NTFS等文件系统,ZFS文件系统作为一种革新性的新文件系统,可从根本上改变文件系统的管理方式,并具有目前面市的其他任何文件系统所没有的功能和优点。ZFS开源、强健可靠、可伸缩、易于管理,更重要是其突出了对数据完整性的保护。因此当下更多存储公司的文件系统都是基于ZFS文件系统的二次开发。

但是现有社区提供的基于ZFS文件系统的异步远程复制功能性能无法满足企业要求,特别是基于全国产平台下的性能更低。因此修改其IO流程、优化传输性能迫在眉睫。

如图1所示,原方案采用发送快照的方式来实现此功能,即在本地创建快照,内核将快照文件系统读出到缓存,再写入到用户空间的标准输出,之后通过linux的管道(pipeline)将用户空间的数据传给ssh,远端节点通过sshd接收数据和命令将数据从用户空间读取到内核空间,再写入到文件系统。整个流程涉及到内核空间到用户空间、用户空间到内核空间的两次跨空间拷贝。

发明内容

本发明要解决的技术问题是提供一种提高基于ZFS文件系统异步远程复制的方法及系统,减少了数据拷贝次数,特别是去除了内核空间与用户空间之间的拷贝,提高了跨节点远程复制性能。

为解决上述技术问题,本发明提供了一种提高基于ZFS文件系统异步远程复制的方法,所述方法包括:传输节点发起向接收节点的socket连接,并在发起socket连接之后输出文件句柄;接收节点进行socket连接监听,并在监听到socket连接后输出文件句柄;传输节点和接收节点根据各自持有的文件句柄,执行通过socket连接的异步远程复制。

在一些实施方式中,异步远程复制为基于句柄的ZFS内核通讯。

在一些实施方式中,异步远程复制不使用标准输入,也不使用标准输出。

在一些实施方式中,传输节点内部配备zfs_send模块,接收节点内部配备zfs_recv模块。

在一些实施方式中,在传输节点内部,由zfs_send模块执行socket连接发起、文件句柄输出及异步远程复制的操作。

在一些实施方式中,在接收节点内部,由zfs_recv模块执行socket连接监听、文件句柄输出及异步远程复制的操作。

在一些实施方式中,由传输节点和接收节点输出的文件句柄均为基于socket连接的文件句柄。

此外,本发明还提供了一种提高基于ZFS文件系统异步远程复制的系统,所述系统包括:传输节点,用于发起向接收节点的socket连接,并在发起socket连接之后输出文件句柄,以及根据其持有的文件句柄,执行通过socket连接的异步远程复制;接收节点,用于进行socket连接监听,并在监听到socket连接后输出文件句柄,以及根据其持有的文件句柄,执行通过socket连接的异步远程复制。

采用这样的设计后,本发明至少具有以下优点:

下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。

该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京同有飞骥科技股份有限公司,未经北京同有飞骥科技股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服

本文链接:http://www.vipzhuanli.com/pat/books/202010934884.3/2.html,转载请声明来源钻瓜专利网。

×

专利文献下载

说明:

1、专利原文基于中国国家知识产权局专利说明书;

2、支持发明专利 、实用新型专利、外观设计专利(升级中);

3、专利数据每周两次同步更新,支持Adobe PDF格式;

4、内容包括专利技术的结构示意图流程工艺图技术构造图

5、已全新升级为极速版,下载速度显著提升!欢迎使用!

请您登陆后,进行下载,点击【登陆】 【注册】

关于我们 寻求报道 投稿须知 广告合作 版权声明 网站地图 友情链接 企业标识 联系我们

钻瓜专利网在线咨询

周一至周五 9:00-18:00

咨询在线客服咨询在线客服
tel code back_top