[发明专利]一种数据处理的方法、相关设备及存储系统有效
申请号: | 201610348463.6 | 申请日: | 2016-05-24 |
公开(公告)号: | CN107423301B | 公开(公告)日: | 2021-02-23 |
发明(设计)人: | 单卫华;李嘉;董阳 | 申请(专利权)人: | 华为技术有限公司 |
主分类号: | G06F16/172 | 分类号: | G06F16/172;G06F16/182;H04L29/08 |
代理公司: | 深圳市深佳知识产权代理事务所(普通合伙) 44285 | 代理人: | 王仲凯 |
地址: | 518129 广东*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 数据处理 方法 相关 设备 存储系统 | ||
本发明实施例公开了一种数据处理的方法、相关设备及存储系统,用于提高数据存储的灵活性。数据处理的方法包括:第一存储管理设备接收第一主机生成的写数据请求,第一主机设置有第一存储管理设备;第一存储管理设备根据写数据请求,写数据请求包括待写入数据,确定写数据请求对应的调度信息,写数据请求对应的调度信息指示分布式存储池,或第一主机的本地存储设备;第一存储管理设备根据写数据请求对应的调度信息,处理待写入数据。本发明实施例还提供了一种存储管理设备、计算设备和存储系统,用于提高数据存储的灵活性。
技术领域
本发明涉及计算机领域,尤其涉及一种数据处理的方法、相关设备及存储系统。
背景技术
随着信息技术的飞速发展,数据呈现出爆发式增长,目前已经步入了海量数据的时代。传统的数据存储方式已经不能再满足当前的存储现状。大数据云化为海量数据存储提供了解决方案。目前,国内外云存储技术发展迅速,比较有代表性的存储技术。例如,Hadoop分布式文件系统(Hadoop distributed file system,缩写:HDFS)和亚马逊AmazonS3等。其中,HDFS存储是由计算机网络与节点组成的集群文件系统集合在一起,将文件分片打散到各节点,支持数据的节点存储,客户端通过网络连接访问远端存储,若有高每秒进行读写操作的次数(input/output operations per second,缩写:I/OPS)需求,则性能较差。Amazon S3存储为外置存储,吞吐量较大。若大数据的应用场景下,性能较差。
通常的方法中,每种存储技术具有各自的存储架构,数据处理不灵活,对应不同的应用场景适应性能较差。
发明内容
本发明实施例提供了一种数据处理的方法、相关深及存储管理设备,能够支持多种应用场景,适应性强,提高数据存储的灵活性。
第一方面,本发明实施例提供一种数据处理的方法,该方法应用于存储系统,该存储系统中包括多个主机,每个主机设置有本地存储设备、分布式存储设备和存储管理设备。每个主机的存储介质可以分为两个部分,一个部分可以为该主机的本地存储设备,另一个部分可以为分布式存储设备,每个主机的分布式存储设备用于形成每个主机共享的分布式存储池。其中,第一主机为多个主机中的一个,第一存储管理设备为设置于第一主机中的存储管理设备。那么,该数据处理的方法包括:第一存储管理设备接收第一主机生成的写数据请求,第一主机可以包括第一虚拟机,第一存储管理设备也可以接收第一虚拟机的写数据请求。第一存储管理设备根据写数据请求,确定写数据请求对应的调度信息,其中,该写数据请求包括待写入数据,该调度信息用于指示待写入数据的存储资源,该存储资源可以理解为待写入数据的存储位置。该调度信息可以指示该待写入数据的存储位置为分布式存储池,或第一主机的本地存储设备。然后,第一存储管理设备可以根据写数据请求对应的调度信息,处理待写入数据,处理待写入数据包括将待写入数据存储至第一主机的本地存储设备和/或分布式存储池。
本发明实施例中,调度信息可以指示待写入数据的存储位置为本地存储设备和/或分布式存储池,存储管理设备确定了该写数据请求对应的调度信息,可以根据该调度信息对待写入数据进行处理。极大的提高了待写入数据存储的灵活性,更加灵活的适用多种应用场景。
在一种可能实现的方式中,该第一主机或者该第一主机的第一虚拟机中挂载有多种不同类型的逻辑卷。第一存储管理设备管理多种类型的逻辑卷,该多种类型的逻辑卷包括本地存储卷和分布式存储卷。第一存储管理设备还存储有每种逻辑卷对应的调度信息。其中,本地存储卷对应的调度信息指示待写入数据的存储资源为第一主机的本地存储设备,而分布式存储卷对应的调度信息指示待写入数据的存储资源为分布式存储池。第一存储管理设备确定写数据请求对应的调度信息可以具体为:第一存储管理设备确定写数据请求对应的逻辑卷,然后,获取写数据请求对应的该种逻辑卷所对应的调度信息。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于华为技术有限公司,未经华为技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201610348463.6/2.html,转载请声明来源钻瓜专利网。
- 上一篇:一种终端文件处理的方法、装置及移动终端
- 下一篇:缓存更新方法及装置