[发明专利]提高基于ZFS文件系统异步远程复制的方法及系统在审
申请号: | 202010934884.3 | 申请日: | 2020-09-08 |
公开(公告)号: | CN112069146A | 公开(公告)日: | 2020-12-11 |
发明(设计)人: | 于召鑫;李婷;陈凯余;晁永祺;王道邦;周泽湘;仇悦;文中领 | 申请(专利权)人: | 北京同有飞骥科技股份有限公司 |
主分类号: | G06F16/182 | 分类号: | G06F16/182 |
代理公司: | 北京方韬法业专利代理事务所(普通合伙) 11303 | 代理人: | 党小林 |
地址: | 100000 北京市海淀*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 提高 基于 zfs 文件系统 异步 远程 复制 方法 系统 | ||
本发明提供了一种提高基于ZFS文件系统异步远程复制的方法及系统。该方法包括:传输节点发起向接收节点的socket连接,并在发起socket连接之后输出文件句柄;接收节点进行socket连接监听,并在监听到socket连接后输出文件句柄;传输节点和接收节点根据各自持有的文件句柄,执行通过socket连接的异步远程复制。本发明提供的提高基于ZFS文件系统异步远程复制的方法及系统减少了数据拷贝次数,特别是去除了内核空间与用户空间之间的拷贝,提高了跨节点远程复制性能。
技术领域
本发明涉及数据存储技术领域,特别是涉及一种提高基于ZFS文件系统异步远程复制的方法及系统。
背景技术
存储系统是指计算机中由存放程序和数据的各种存储设备、控制部件及管理信息调度的设备(硬件)和算法(软件)所组成的系统。其中存储文件系统在整个存储系统里面至关重要。相对于传统的EXT、XFS、JFS、ReiserFS或NTFS等文件系统,ZFS文件系统作为一种革新性的新文件系统,可从根本上改变文件系统的管理方式,并具有目前面市的其他任何文件系统所没有的功能和优点。ZFS开源、强健可靠、可伸缩、易于管理,更重要是其突出了对数据完整性的保护。因此当下更多存储公司的文件系统都是基于ZFS文件系统的二次开发。
但是现有社区提供的基于ZFS文件系统的异步远程复制功能性能无法满足企业要求,特别是基于全国产平台下的性能更低。因此修改其IO流程、优化传输性能迫在眉睫。
如图1所示,原方案采用发送快照的方式来实现此功能,即在本地创建快照,内核将快照文件系统读出到缓存,再写入到用户空间的标准输出,之后通过linux的管道(pipeline)将用户空间的数据传给ssh,远端节点通过sshd接收数据和命令将数据从用户空间读取到内核空间,再写入到文件系统。整个流程涉及到内核空间到用户空间、用户空间到内核空间的两次跨空间拷贝。
发明内容
本发明要解决的技术问题是提供一种提高基于ZFS文件系统异步远程复制的方法及系统,减少了数据拷贝次数,特别是去除了内核空间与用户空间之间的拷贝,提高了跨节点远程复制性能。
为解决上述技术问题,本发明提供了一种提高基于ZFS文件系统异步远程复制的方法,所述方法包括:传输节点发起向接收节点的socket连接,并在发起socket连接之后输出文件句柄;接收节点进行socket连接监听,并在监听到socket连接后输出文件句柄;传输节点和接收节点根据各自持有的文件句柄,执行通过socket连接的异步远程复制。
在一些实施方式中,异步远程复制为基于句柄的ZFS内核通讯。
在一些实施方式中,异步远程复制不使用标准输入,也不使用标准输出。
在一些实施方式中,传输节点内部配备zfs_send模块,接收节点内部配备zfs_recv模块。
在一些实施方式中,在传输节点内部,由zfs_send模块执行socket连接发起、文件句柄输出及异步远程复制的操作。
在一些实施方式中,在接收节点内部,由zfs_recv模块执行socket连接监听、文件句柄输出及异步远程复制的操作。
在一些实施方式中,由传输节点和接收节点输出的文件句柄均为基于socket连接的文件句柄。
此外,本发明还提供了一种提高基于ZFS文件系统异步远程复制的系统,所述系统包括:传输节点,用于发起向接收节点的socket连接,并在发起socket连接之后输出文件句柄,以及根据其持有的文件句柄,执行通过socket连接的异步远程复制;接收节点,用于进行socket连接监听,并在监听到socket连接后输出文件句柄,以及根据其持有的文件句柄,执行通过socket连接的异步远程复制。
采用这样的设计后,本发明至少具有以下优点:
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京同有飞骥科技股份有限公司,未经北京同有飞骥科技股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010934884.3/2.html,转载请声明来源钻瓜专利网。