[发明专利]文件存储方法和装置、电子设备、程序和介质在审
申请号: | 201711217713.3 | 申请日: | 2017-11-28 |
公开(公告)号: | CN108234594A | 公开(公告)日: | 2018-06-29 |
发明(设计)人: | 莫涛;陈宇恒 | 申请(专利权)人: | 北京市商汤科技开发有限公司 |
主分类号: | H04L29/08 | 分类号: | H04L29/08;G06F17/30 |
代理公司: | 北京思源智汇知识产权代理有限公司 11657 | 代理人: | 毛丽琴 |
地址: | 100084 北京市海淀区中*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 小文件 缓冲区 分块 方法和装置 电子设备 文件存储 写请求 索引 附属存储器 小文件存储 合并存储 数据追加 文件标识 写入条件 优化存储 进程 偏移量 响应 服务器 写入 网络 | ||
1.一种文件存储方法,其特征在于,包括:
响应于接收到写请求,服务器上的至少一个第一进程将所述写请求中的小文件存储在所述第一进程的缓冲区内,确定所述小文件的索引;其中,所述小文件的索引包括:所述小文件所在分块文件的分块文件标识、以及所在节的节标识和节内偏移量;
响应于满足所述缓冲区中数据的写入条件,所述第一进程将所述缓冲区中的数据写入到网络附属存储器中的一个分块文件中。
2.根据权利要求1所述的方法,其特征在于,所述满足所述缓冲区中数据的写入条件,所述第一进程将所述缓冲区中的数据写入到网络附属存储器中的一个分块文件中,包括:
响应于所述缓冲区中的数据量达到一个节的大小,所述第一进程将所述缓冲区中的数据作为一个节,追加写入到网络附属存储器中的一个分块文件中;
和/或
响应于所述缓冲区中的数据在所述缓冲区中的最长保存时间达到预设时长阈值,所述第一进程将所述缓冲区中的数据追加写入到网络附属存储器中的一个分块文件中。
3.根据权利要求1或2所述的方法,其特征在于,所述服务器包括至少一个,每个服务器上运行有至少一个进程;所述网络附属存储器挂载到所述至少一个服务器上;
所述方法还包括:
响应于接收到第一应用发送的写请求,负载均衡器将所述写请求分发给至少一个服务器上的至少一个所述第一进程。
4.根据权利要求1-3任一所述的方法,其特征在于,所述缓冲区的大小为一个节的大小,或者所述缓冲区的大小大于一个节的大小。
5.一种文件存储装置,其特征在于,包括:
至少一个进程,位于至少一个服务器上,用于响应于接收到写请求,作为第一进程将所述写请求中的小文件存储在该第一进程的缓冲区内,确定所述小文件的索引,其中,所述小文件的索引包括:所述小文件所在分块文件的分块文件标识、以及所在节的节标识和节内偏移量;以及响应于满足所述缓冲区中数据量的写入条件,将所述缓冲区中的数据写入到网络附属存储器中的一个分块文件中;
网络附属存储器,挂载到至少一个所述服务器上,用于存储分块文件。
6.一种电子设备,其特征在于,包括:权利要求5所述的文件存储装置。
7.一种电子设备,其特征在于,包括:
处理器和权利要求5所述的文件存储装置;
在处理器运行所述文件存储装置时,权利要求5所述的文件存储装置中的单元被运行。
8.一种电子设备,其特征在于,包括:处理器、存储器、通信接口和通信总线,所述处理器、所述存储器和所述通信接口通过所述通信总线完成相互间的通信;
所述存储器用于存放至少一可执行指令,所述可执行指令使所述处理器执行权利要求1-4任一所述方法中各步骤的操作。
9.一种计算机程序,包括计算机可读代码,其特征在于,当所述计算机可读代码在设备上运行时,所述设备中的处理器执行用于实现权利要求1-4任一所述方法中各步骤的指令。
10.一种计算机可读介质,用于存储计算机可读取的指令,其特征在于,所述指令被执行时实现权利要求1-4任一所述方法中各步骤的操作。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京市商汤科技开发有限公司,未经北京市商汤科技开发有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201711217713.3/1.html,转载请声明来源钻瓜专利网。
- 上一篇:工程施工执行承包商选定服务器及方法
- 下一篇:日志传输方法及系统