[发明专利]数据访问方法、数据访问装置及存储介质在审
申请号: | 202010849743.1 | 申请日: | 2020-08-21 |
公开(公告)号: | CN111930315A | 公开(公告)日: | 2020-11-13 |
发明(设计)人: | 张朝潞 | 申请(专利权)人: | 北京天融信网络安全技术有限公司;北京天融信科技有限公司;北京天融信软件有限公司 |
主分类号: | G06F3/06 | 分类号: | G06F3/06;G06F9/455 |
代理公司: | 北京金信知识产权代理有限公司 11225 | 代理人: | 孙勤;喻嵘 |
地址: | 100085 北京*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 数据 访问 方法 装置 存储 介质 | ||
本申请公开了一种基于分布式存储系统的数据访问方法、数据访问装置及存储介质,所述数据访问方法包括:获取数据块与服务器之间对应关系;确定出所述分布式存储系统中的数据块中存在的热点数据块;所述热点数据块属于远程服务器时,将所述热点数据块从远程服务器迁移至本地服务器上,以实现热点数据块的本地化访问。本申请实施例中,将确定出的热点数据块迁移至本地服务器,以在数据读取时,通过分布式存储系统读取数据块,对于确定出的热点数据块可以直接从本地服务器中进行读取然后合并,获得所需数据,使得读取IO访问的路径缩短,降低读取IO延迟,提升用户体验。
技术领域
本申请涉及计算机存储技术领域,特别涉及一种基于分布式存储系统的数据访问方法、数据访问装置及存储介质。
背景技术
随着信息技术的发展,超融合系统近年来在私有云领域快速发展,超融合系统的核心为计算与存储融合部署,其中存储通常采用分布式存储架构,在系统中添加新的物理存储节点即可扩展计算资源与存储资源。
目前分布式存储都是把一块数据按照固定的大小分成若干份,然后把这些小数据块分散地保存到整个超融合系统中的各个物理存储节点上。随着时间的推移,存储的数据总量增长迅速,各个物理存储节点的存储数据都需通过TCP/IP网络进行传输,由于物理网络的特性,在需要读取各个物理存储节点上的数据库时,效率较低,分布式存储的IO延迟成为制约整个超融合系统发展的瓶颈。此外,超融合系统中,如进行虚拟机迁移时,现有技术中通常将虚拟机磁盘上的数据整体进行拷贝后传输至目标物理主机,由于数据量较大,传输时间长,而且数据传输时也会占据网络宽带,数据迁移成本高,影响用户体验。
发明内容
为了解决上述技术问题,本申请提供了一种基于分布式存储系统的数据访问方法、数据访问装置及存储介质。
本申请的实施例采用了如下技术方案:
一种基于分布式存储系统的数据访问方法,包括:
获取数据块与服务器之间对应关系;
确定出所述分布式存储系统中的数据块中存在的热点数据块;
所述热点数据块属于远程服务器时,将所述热点数据块从远程服务器迁移至本地服务器上,以实现热点数据块的本地化访问。
在本申请的一些实施例中,所述获取数据块与服务器之间对应关系,具体包括:
基于数据映射表获取数据块与服务器之间对应关系;
所述数据映射表包括:本地映射表和远程映射表,所述本地映射表用于记录数据块分布在本地服务器的具体位置的对应关系,所述远程数据映射表用于记录数据块分布在远程服务器的具体位置的对应关系。
在本申请的一些实施例中,应用于虚拟机的迁移时的数据迁移,所述方法具体包括:
确定出本地服务器中存在的热点数据块;
随所述虚拟机从本地服务器迁移至远程服务器,将所述热点数据块从本地服务器迁移至远程服务器,以实现热点数据块的本地化访问。
在本申请的一些实施例中,虚拟机迁移至第二服务器之后,所述方法具体包括:
获取数据块与服务器之间对应关系;
确定出所述分布式存储系统中的数据块中存在的热点数据块;
所述热点数据块属于远程服务器时,将所述热点数据块从远程服务器迁移至本地服务器上,以实现热点数据块的本地化访问。
在本申请的一些实施例中,所述获取数据块与服务器之间对应关系,包括:获取数据块与服务器之间更新后的对应关系。
在本申请的一些实施例中,所述获取数据块与服务器之间更新后的对应关系,具体包括:
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京天融信网络安全技术有限公司;北京天融信科技有限公司;北京天融信软件有限公司,未经北京天融信网络安全技术有限公司;北京天融信科技有限公司;北京天融信软件有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202010849743.1/2.html,转载请声明来源钻瓜专利网。
- 上一篇:一种励磁型双电源快速转换开关
- 下一篇:一种卷纸切割装置
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置