[发明专利]文件读取测试方法和装置有效
申请号: | 201910231532.9 | 申请日: | 2019-03-26 |
公开(公告)号: | CN109947613B | 公开(公告)日: | 2023-03-24 |
发明(设计)人: | 刘朋;李莅 | 申请(专利权)人: | 北京百度网讯科技有限公司 |
主分类号: | G06F11/22 | 分类号: | G06F11/22;G06F11/263;G06F3/06 |
代理公司: | 北京英赛嘉华知识产权代理有限责任公司 11204 | 代理人: | 王达佐;马晓亚 |
地址: | 100085 北京市*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 文件 读取 测试 方法 装置 | ||
1.一种文件读取测试方法,包括:
通过多个第一资源调度单元向存储系统写入文件,基于第一资源调度单元的标识生成文件记录并添加至文件记录列表中,每条文件记录用于记录通过对应的一个第一资源调度单元写入的至少一个文件,其中,通过所述第一资源调度单元的标识以及所述第一资源调度单元写入文件的顺序编号来区分不同的文件;
在进行读测试之前,对所述文件记录列表中所记录的所有文件进行分片,得到多个文件分片,每个所述文件分片中的全部文件来自同一条所述文件记录,其中,根据所述文件记录列表所记录的文件的数量对每条文件记录所记录的文件按照每个分片的文件数量进行分片;
根据读测试的类型将文件分片分配至已创建的第二资源调度单元,并通过所述第二资源调度单元读取分配的文件分片。
2.根据权利要求1所述的方法,其中,所述对所述文件记录列表中所记录的所有文件进行分片,得到多个文件分片,包括:
基于所述文件记录列表中所记录的文件的总数、预设的第二资源调度单元的数量、以及根据读测试的类型预先确定的每个第二资源调度单元分配的文件分片的数量,确定每个文件分片中的文件数量;
基于每个文件分片中的文件数量对所述文件记录列表中所记录的文件进行分片,得到多个文件分片;
根据各文件分片对应的第一资源调度单元的标识和文件数量生成各文件分片的文件分片记录。
3.根据权利要求2所述的方法,其中,所述文件分片记录包括对应的第一资源调度单元的标识、分片中起始文件的编号、分片中末尾文件的编号,以及分片中读测试的起始测试文件编号。
4.根据权利要求3所述的方法,其中,所述读测试类型包括顺序读取,所述分片中读测试的起始测试文件编号与所述分片中起始文件的编号一致;
所述根据读测试的类型将文件分片分配至已创建的第二资源调度单元,并通过所述第二资源调度单元读取分配的文件分片,包括:
将所述文件分片记录对应的文件分片顺序分配至各第二资源调度单元;
对于分配至第二资源调度单元的每个文件分片,从分片中的读测试的起始测试文件编号开始,依次顺序读取文件分片的所有文件,之后从下一个文件分片中的读测试的起始测试文件编号开始,依次顺序读取下一个文件分片的所有文件。
5.根据权利要求3所述的方法,其中,所述读测试类型包括随机读取,所述分片中读测试的起始测试文件编号为所述分片中起始文件的编号至末尾文件的编号区间内的一个编号;
所述根据读测试的类型将文件分片分配至已创建的第二资源调度单元,并通过所述第二资源调度单元读取分配的文件分片,包括:
按照满足预先确定的每个第二资源调度单元分配的文件分片的数量,随机地将所述文件分片分配至各第二资源调度单元;
对于分配至每个第二资源调度单元的文件分片,按照如下方式进行读取:
循环执行依次从每个文件分片中读取一个分片的操作,并且,对于每个文件分片中的多个文件,以所述文件分片中读测试的起始测试文件编号所指示的文件为读取的第一个文件顺序读取分片中的所有文件。
6.一种文件读取测试装置,包括:
写入单元,被配置为通过多个第一资源调度单元向存储系统写入文件,基于第一资源调度单元的标识生成文件记录并添加至文件记录列表中,每条文件记录用于记录通过对应的一个第一资源调度单元写入的至少一个文件,其中,通过所述第一资源调度单元的标识以及所述第一资源调度单元写入文件的顺序编号来区分不同的文件;
分片单元,被配置为在进行读测试之前,对所述文件记录列表中所记录的所有文件进行分片,得到多个文件分片,每个所述文件分片中的全部文件来自同一条所述文件记录,其中,根据所述文件列表所记录的文件的数量对每条文件记录所记录的文件按照每个分片的文件数量进行分片;
测试单元,被配置为根据读测试的类型将文件分片分配至已创建的第二资源调度单元,并通过所述第二资源调度单元读取分配的文件分片。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京百度网讯科技有限公司,未经北京百度网讯科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910231532.9/1.html,转载请声明来源钻瓜专利网。