[发明专利]分布式文件系统中的数据处理方法和装置在审
申请号: | 202210134068.3 | 申请日: | 2022-02-14 |
公开(公告)号: | CN114546954A | 公开(公告)日: | 2022-05-27 |
发明(设计)人: | 于相洋 | 申请(专利权)人: | 维沃移动通信有限公司 |
主分类号: | G06F16/16 | 分类号: | G06F16/16;G06F16/14;G06F16/172;G06F16/182;G06F3/06 |
代理公司: | 北京国昊天诚知识产权代理有限公司 11315 | 代理人: | 王思超 |
地址: | 523863 *** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 分布式 文件系统 中的 数据处理 方法 装置 | ||
1.一种分布式文件系统中的数据处理方法,其特征在于,所述方法包括:
在接收到第一数据的读请求的情况下,从缓存组的多个节点中确定第一节点;
在所述第一节点不是本地节点的情况下,从所述第一节点读取所述第一数据;
发送所述读请求的反馈信息,其中,所述反馈信息包括所述第一数据。
2.根据权利要求1所述的方法,其特征在于,所述方法还包括:
在所述第一节点为本地节点的情况下,确定所述第一数据是否缓存在本地缓存;
在所述第一数据缓存在所述本地缓存的情况下,从所述本地缓存读取所述第一数据以反馈所述读请求;
在所述第一数据未缓存在所述本地缓存的情况下,从后端存储系统读取所述第一数据以反馈所述读请求,并将所述第一数据缓存在所述本地缓存。
3.根据权利要求1所述的方法,其特征在于,所述在接收到第一数据的读请求的情况下,从缓存组的多个节点中确定第一节点,包括:
在接收到第一数据的读请求的情况下,确定所述第一数据的哈希值;
根据所述第一数据的哈希值,从所述缓存组的多个节点中确定第一节点。
4.根据权利要求1所述的方法,其特征在于,所述方法还包括:
在接收到第二数据的写请求的情况下,通过本地节点将所述第二数据写入后端存储系统,并从所述缓存组的多个节点中确定第二节点;
删除所述第二节点的缓存中的目标原始数据。
5.根据权利要求1所述的方法,其特征在于,所述方法还包括:
每隔预定时间,确定本地缓存的缓存容量值;
在所述本地缓存的缓存容量值高于告警值的情况下,删除所述本地缓存中的第三数据以使所述本地缓存的缓存容量值低于所述告警值;
其中,所述第三数据在预定时间内未被访问。
6.一种分布式文件系统中的数据处理装置,其特征在于,所述装置包括:
节点确定模块,用于在接收到第一数据的读请求的情况下,从缓存组的多个节点中确定第一节点;
第一处理模块,用于在所述第一节点不是本地节点的情况下,从所述第一节点读取所述第一数据;
返回模块,用于发送所述读请求的反馈信息,其中,所述反馈信息包括所述第一数据。
7.根据权利要求6所述的装置,其特征在于,所述第一处理模块还用于:
在所述第一节点为本地节点的情况下,确定所述第一数据是否缓存在本地缓存;
在所述第一数据缓存在所述本地缓存的情况下,从所述本地缓存读取所述第一数据以反馈所述读请求;
在所述第一数据未缓存在所述本地缓存的情况下,从后端存储系统读取所述第一数据以反馈所述读请求,并将所述第一数据缓存在所述本地缓存。
8.根据权利要求6所述的装置,其特征在于,所述节点确定模块还用于:
在接收到第一数据的读请求的情况下,确定所述第一数据的哈希值;
根据所述第一数据的哈希值,从所述缓存组的多个节点中确定第一节点。
9.根据权利要求6所述的装置,其特征在于,所述装置还包括第二处理模块和第三处理模块;
所述第二处理模块,用于在接收到第二数据的写请求的情况下,通过本地节点将所述第二数据写入后端存储系统;
所述节点确定模块,还用于在接收到第二数据的写请求的情况下,从所述缓存组的多个节点中确定第二节点;
所述第三处理模块,用于删除所述第二节点的缓存中的目标原始数据。
10.根据权利要求6所述的装置,其特征在于,所述装置还包括:
第四处理模块,用于每隔预定时间,确定本地缓存的缓存容量值;在所述本地缓存的缓存容量值高于告警值的情况下,删除所述本地缓存中的第三数据以使所述本地缓存的缓存容量值低于所述告警值;其中,所述第三数据在预定时间内未被访问。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于维沃移动通信有限公司,未经维沃移动通信有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202210134068.3/1.html,转载请声明来源钻瓜专利网。