[发明专利]一种高效的图片存储读取系统及方法在审
申请号: | 201911426318.5 | 申请日: | 2019-12-31 |
公开(公告)号: | CN111241312A | 公开(公告)日: | 2020-06-05 |
发明(设计)人: | 冯继强;丁捷 | 申请(专利权)人: | 苏州极光无限信息技术有限公司 |
主分类号: | G06F16/51 | 分类号: | G06F16/51;G06F3/06 |
代理公司: | 北京轻创知识产权代理有限公司 11212 | 代理人: | 王欢 |
地址: | 215000 江苏省苏州市工*** | 国省代码: | 江苏;32 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 高效 图片 存储 读取 系统 方法 | ||
本发明涉及一种高效的图片存储读取系统及方法,包括:图片存储模块,用于直接存储图片,并给图片分配一个存储的参数;图片参数存储模块,用于存储图片的参数,所述参数对应所述图片存储模块中的存储位置;图片缓存模块,在图片存入所述图片存储模块时进行缓存;调取服务模块,用于根据请求向所述图片参数存储模块调取图片的参数,再根据参数从所述图片存储模块中调取相应的图片,本发明极大的减少了在访问图片时的文件IO的次数,读取图片文件没有寻址过程,只需要找到对应的物理卷,进行一次顺序读取,显著提高了读取效率,并且由于图片缓存模块进行预先缓存,将读取和存储分开,也显著的增加了存储效率。
技术领域
本发明涉及一种高效的图片存储读取系统及方法,属于数据存储技术领域。
背景技术
现在大部分图片存储系统,都是直接将单个图片直接保存在磁盘上,一张图片对应一个文件,再由服务器为每个图片文件生成唯一ID,并且存到不同的目录下,这样直接导致的问题是,当图片越来越多,文件数量也随之增加,目录的数量和深度也随之增加,如果需要读取某一张图片,传统的POSIX文件系统,首先需要读取图片文件的元数据,即MetaData,再根据MetaData去读取对应的图片文件,这其中需要多次文件I/O,在大量的读取请求下,无论是响应速度,还是开销都非常巨大,用户等待的时间也更长。
随着服务器的发展,现在网络服务端的图片存储,如图1所示,一般都是由用户向WebServer请求图片,WebServer返回图片的URL,再由用户根据返回的URL进行下载,下载的过程一般是直接请求CDN节点,如果CDN的缓存中有对应的图片,则直接返回;如果没有对应的图片,则再次由CDN到图片存储服务中读取图片,图片存储服务器自身的文件读取流程包含:1)读取图片对应的metaData;2)读取inode信息;3)读取图片信息;一般至少需要3次文件I/O,文件I/O属于系统调用,速度非常慢,当文件存储服务处理大量请求时,过多的文件I/O次数明显成为瓶颈。
发明内容
本发明要解决的技术问题是:为克服上述问题,提供一种减少文件IO次数的高效的图片存储读取系统及方法。
本发明解决其技术问题所采用的技术方案是:
一种高效的图片存储读取系统,包括:
图片存储模块,用于直接存储图片,并给图片分配一个存储的参数;
图片参数存储模块,用于存储图片的参数,所述参数对应所述图片存储模块中的存储位置;
图片缓存模块,在图片存入所述图片存储模块时进行缓存;
调取服务模块,用于根据请求向所述图片参数存储模块调取图片的参数,再根据参数从所述图片存储模块中调取相应的图片。
在优选的实施方式中,所述图片存储模块将储存空间分为多个物理卷,所述物理卷直接存储图片,所述物理卷空间存储满之后显示为只读状态。
在优选的实施方式中,所述图片存储模块中还包括卷文件夹,所述卷文件夹中存储着给图片分配的参数包括:图片ID、物理卷标、逻辑卷标、逻辑卷标与物理卷标的对应关系、图片偏移量和图片数据大小。
在优选的实施方式中,所述图片参数存储模块存储图片的部分参数,包括图片ID、物理卷标、逻辑卷标和逻辑卷标与物理卷标的对应关系。
在优选的实施方式中,还包括节点缓存模块,用于在网络环境缓存最近访问的图片。
在优选的实施方式中,所述图片缓存模块采用分布式哈希表,其缓存最近存入的图片,当缓存的图片对应存储的物理卷存储满之后,则将该缓存图片删除出图片缓存。
一种以上所述图片存储读取系统的图片存储读取方法,包括以下步骤:
S1:调取服务模块获得图片访问请求,向所述图片参数存储模块调取该图片的参数;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于苏州极光无限信息技术有限公司,未经苏州极光无限信息技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201911426318.5/2.html,转载请声明来源钻瓜专利网。
- 上一篇:一种接口转换装置
- 下一篇:基于车辆轨迹的停等聚集效应预测方法