[发明专利]一种跨节点的温数据池预读方法在审
申请号: | 201910587588.8 | 申请日: | 2019-07-02 |
公开(公告)号: | CN110321080A | 公开(公告)日: | 2019-10-11 |
发明(设计)人: | 常旭;陕振;赵彬 | 申请(专利权)人: | 北京计算机技术及应用研究所 |
主分类号: | G06F3/06 | 分类号: | G06F3/06 |
代理公司: | 中国兵器工业集团公司专利中心 11011 | 代理人: | 张然 |
地址: | 100854*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 磁盘 数据池 存储节点 磁盘读写 存储系统 节点存储 系统整体 读写 并发 响应 优化 访问 | ||
1.一种跨节点的温数据池预读方法,其特征在于,温数据池在第一存储节点使用第一磁盘和第二磁盘,第二存储节点使用第三磁盘、第四磁盘和第五磁盘,第三存储节点使用第六磁盘和第七磁盘,第四存储节点使用第八磁盘;
读取16个跨节点文件的过程包括:
读取分为4组:第一存储节点为第一组,第二存储节点为第二组,第三存储节点为第三组,第四存储节点为第四组;
第一组,从第一存储节点的第一磁盘预读文件5和文件1,第二磁盘预读文件11、文件2和文件12;
第二组,从第二存储节点的第三磁盘预读文件3和文件6,第四磁盘预读文件7和文件4,第五磁盘预读文件8;
第三组,从第三存储节点的第六磁盘6预读文件13,第七磁盘预读文件9和文件10;
第四组,从第四存储节点的第八磁盘8预读文件15、文件14和文件16;
第一组、第二组、第三组和第四组并发预读;文件1到文件16为顺序排列。
2.如权利要求1所述的跨节点的温数据池预读方法,其特征在于,第一存储节点的CPU平均使用率为10%,内存资源使用率30%,带宽资源使用率为60%;第二存储节点的CPU平均使用率为20%,内存资源使用率15%,带宽资源使用率为40%;第三存储节点的CPU平均使用率为30%,内存资源使用率30%,带宽资源使用率为40%;第四存储节点的CPU平均使用率为40%,内存资源使用率40%,带宽资源使用率为70%;各个节点权值计算为去掉百分号对数字进行累加。
3.如权利要求1所述的跨节点的温数据池预读方法,其特征在于,4个存储节点将各自的预读文件推送到各自的高速缓存上,元数据服务器从高速缓存上再对预读文件进行组装。
4.如权利要求1所述的跨节点的温数据池预读方法,其特征在于,四组存储节点之间通过RDMA网络进行交互认证,以验证4个存储节点数据总和是否和数据长度相等,如不等,则对相关节点进行重发。
5.如权利要求2所述的跨节点的温数据池预读方法,其特征在于,权值越高,分配磁盘越少。
6.如权利要求1所述的跨节点的温数据池预读方法,其特征在于,第一存储节点分配2块磁盘,第二存储节点分配3块磁盘,第三存储节点分配2块磁盘,第四存储节点分配1块磁盘。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京计算机技术及应用研究所,未经北京计算机技术及应用研究所许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910587588.8/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种基于混合页面的磁盘缓存去重方法
- 下一篇:一种闪存读缓存的方法及其系统