[发明专利]存储系统的数据处理方法和装置有效
申请号: | 201810874819.9 | 申请日: | 2018-08-02 |
公开(公告)号: | CN109144770B | 公开(公告)日: | 2020-11-20 |
发明(设计)人: | 郝志敏;刘军 | 申请(专利权)人: | 联想(北京)有限公司 |
主分类号: | G06F11/10 | 分类号: | G06F11/10 |
代理公司: | 中科专利商标代理有限责任公司 11021 | 代理人: | 吕雁葭 |
地址: | 100085 北京市*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 存储系统 数据处理 方法 装置 | ||
本公开提供了一种存储系统的数据处理方法,所述存储系统包括用户端和存储端,用户端用于接收用户操作请求,存储端用于存储数据,该方法应用于用户端,包括:接收用户操作请求,所述操作请求包括对目标数据进行写操作;在所述用户端存储有所述目标数据的情况下,响应所述操作请求,对所述目标数据进行第一处理,将处理后的目标数据以及第一标记数据发送至所述存储端,其中,所述第一标记数据用于指示所述存储端直接存储所述处理后的目标数据;在所述用户端没有存储所述目标数据的情况下,将所述操作请求以及第二标记数据发送至所述存储端,其中,所述第二标记数据用于指示所述存储端对所述目标数据进行第二处理,并将处理后的目标数据进行存储。
技术领域
本公开涉及一种存储系统的数据处理方法和一种存储系统的数据处理装置。
背景技术
随着计算机技术的快速发展以及数据量的爆炸式增长,为了保证数据的安全性,通常采用数据多副本的方式实现数据的冗余。然而,随着数据量的持续不断增长,副本方式带来的存储效率低的问题越来越明显。于是,出现了纠删码方式的数据冗余策略,在同等数据冗余度的情况下,纠删码方式能够带来存储效率的大幅提高。
在纠删码方式中,通常在计算时需要先将一份数据划分为K块原始的数据,基于K块原始数据经过纠删码算法获得M块校验数据,将得到的K+M块数据按照规则写入存储空间。
在实现本公开构思的过程中,发明人发现现有技术中至少存在如下问题,有些存储系统的计算校验数据的功能在用户端实现,有些存储系统的计算校验数据的功能在存储端实现,十分不灵活。
发明内容
本公开的一个方面提供了一种存储系统的数据处理方法,所述存储系统包括用户端和存储端,所述用户端用于接收用户操作请求,所述存储端用于存储数据,所述方法应用于所述用户端,包括:接收用户操作请求,所述操作请求包括对目标数据进行写操作,在所述用户端存储有所述目标数据的情况下,响应所述操作请求,对所述目标数据进行第一处理,将处理后的目标数据以及第一标记数据发送至所述存储端,其中,所述第一标记数据用于指示所述存储端直接存储所述处理后的目标数据,在所述用户端没有存储所述目标数据的情况下,将所述操作请求以及第二标记数据发送至所述存储端,其中,所述第二标记数据用于指示所述存储端对所述目标数据进行第二处理,并将处理后的目标数据进行存储。
可选地,上述对所述目标数据进行第一处理,包括:对所述目标数据进行所述写操作,生成新目标数据,以及将所述新目标数据分成K份目标数据,通过所述K份目标数据计算出M份校验数据,其中,K为大于等于1的整数,M为大于等于1的整数。
可选地,上述将处理后的目标数据以及第一标记数据发送至所述存储端,包括:将所述K份目标数据、M份校验数据以及第一标记数据发送至所述存储端,其中,所述第一标记数据用于指示所述存储端直接存储所述K份目标数据以及M份校验数据。
可选地,上述对所述目标数据进行第二处理,包括:复原所述目标数据,对所述目标数据进行所述写操作,生成新目标数据,将所述新目标数据分成K份目标数据,通过所述K份目标数据计算出M份校验数据,其中,K为大于等于1的整数,M为大于等于1的整数。
可选地,上述通过所述K份目标数据计算出M份校验数据,包括:使用纠删码算法通过所述K份目标数据计算出M份校验数据。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于联想(北京)有限公司,未经联想(北京)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201810874819.9/2.html,转载请声明来源钻瓜专利网。