[发明专利]数据处理方法及装置在审
申请号: | 201910493541.5 | 申请日: | 2019-06-06 |
公开(公告)号: | CN112051964A | 公开(公告)日: | 2020-12-08 |
发明(设计)人: | 吴忠杰 | 申请(专利权)人: | 阿里巴巴集团控股有限公司 |
主分类号: | G06F3/06 | 分类号: | G06F3/06 |
代理公司: | 北京润泽恒知识产权代理有限公司 11319 | 代理人: | 钱秀茹 |
地址: | 英属开曼群岛大开*** | 国省代码: | 暂无信息 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 数据处理 方法 装置 | ||
本申请提供了一种数据处理方法及装置。该方法包括:接收第一数据的写入请求;将第一数据写入第一数据流,存入存储介质的第一存储空间;对第一数据执行垃圾回收,将第一数据转换为第二数据;将第二数据写入第二数据流,存入存储介质的第二存储空间;其中,第一数据与第二数据具有不同的数据温度。本申请可以降低存储介质的写放大系数,进而提高存储介质的性能。
技术领域
本申请涉及计算机技术领域,特别是涉及一种数据处理方法及装置。
背景技术
当前,越来越多的用户使用存储器来存储数据,当存储器中存储的数据较多时,为了提高存储器的存储空间利用率,往往需要对存储器中存储的高温度数据处理得到中温度数据,并将中温度数据存储在存储器中,然后再对中温度数据处理得到低温度数据,并将低温度数据存储在存储器中等。之后,会对存储器中存储的数据进行垃圾回收处理。
然而,发明人发现,对存储器中存储的数据进行垃圾回收处理会增加存储器的写放大系数,进而降低存储器的性能。
发明内容
为解决上述技术问题,本申请实施例示出了一种数据处理方法及装置。
第一方面,本申请实施例示出了一种数据处理方法,所述方法包括:
接收第一数据的写入请求;
将所述第一数据写入第一数据流,存入存储介质的第一存储空间;
对所述第一数据执行垃圾回收,将所述第一数据转换为第二数据;
将所述第二数据写入第二数据流,存入所述存储介质的第二存储空间;
其中,所述第一数据与第二数据具有不同的数据温度。
在一个可选的实现方式中,所述方法还包括:
对所述第二数据执行垃圾回收,将所述第二数据转换为第三数据;
将所述第三数据写入第三数据流。
在一个可选的实现方式中,所述方法还包括:
将所述第三数据流存入所述存储介质的第三存储空间。
在一个可选的实现方式中,所述第二数据的温度低于所述第一数据的温度,所述第三数据的温度低于第二数据的温度。
在一个可选的实现方式中,所述对所述第一数据执行垃圾回收,将所述第一数据转换为第二数据,包括:
从所述第一数据流中读取所述第一数据,将所述第一数据转换为纠删码数据;
根据所述纠删码数据生成所述第二数据。
在一个可选的实现方式中,所述对所述第二数据执行垃圾回收,将所述第二数据转换为第三数据,包括:
从所述第二数据流中读取所述第二数据,将所述第二数据聚合为第三数据。
在一个可选的实现方式中,所述将所述第二数据写入第二数据流,存入所述存储介质的第二存储空间,包括:
确定所述第二数据的温度;
在所述存储介质中包括的多个存储空间中,确定用于存储所述温度的数据的第二存储空间;
将所述第二数据写入第二数据流,存入所述第二存储空间。
在一个可选的实现方式中,所述确定所述第二数据的温度,包括:
获取在根据所述第二数据的原始数据获取到所述第二数据的过程中包括的垃圾回收的处理次数;
根据所述处理次数确定所述第二数据的温度。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于阿里巴巴集团控股有限公司,未经阿里巴巴集团控股有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910493541.5/2.html,转载请声明来源钻瓜专利网。
- 上一篇:一种移动终端和天线装置
- 下一篇:一种分布式供冷/热系统的精细化控制技术