[发明专利]一种海量图片管理方法和装置有效
申请号: | 201510849675.8 | 申请日: | 2015-11-27 |
公开(公告)号: | CN106815223B | 公开(公告)日: | 2020-10-27 |
发明(设计)人: | 张增明;陈智强;陈德品 | 申请(专利权)人: | 阿里巴巴集团控股有限公司 |
主分类号: | G06F16/51 | 分类号: | G06F16/51 |
代理公司: | 北京润泽恒知识产权代理有限公司 11319 | 代理人: | 苏培华 |
地址: | 英属开曼群岛大开*** | 国省代码: | 暂无信息 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 海量 图片 管理 方法 装置 | ||
1.一种海量图片管理方法,其特征在于,包括:
获取当日更新的多个最新图片;
将所述最新图片通过多个传输线程并行上传到分布式服务器集群中预置的日增图库,所述分布式服务器集群中还部署有全量图库;其中,所述日增图库用于将收到的当日更新的最新图片进行存储;
通过比对图片索引,将所述日增图库中不存在于所述全量图库的最新图片保存至所述全量图库;
接收到应用程序调用图片的请求后,从所述全量图库提取目标图片反馈至所述应用程序。
2.如权利要求1所述的方法,其特征在于,在所述获取当日更新的多个最新图片之前,所述方法还包括:
通过解析商品更新记录获得对应更新的最新商品信息;
从所述最新商品信息解析出所述最新图片的链接地址,根据所述链接地址获取所述最新图片。
3.如权利要求1所述的方法,其特征在于,所述通过比对图片索引,将所述日增图库中不存在于所述全量图库的最新图片保存至所述全量图库包括:
将所述日增图库中最新图片的图片索引与预置的历史索引库进行比对,所述历史索引库中保存所述全量图库中所有图片的图片索引;
提取图片索引不存在于所述历史索引库的最新图片保存至所述全量图库。
4.如权利要求3所述的方法,其特征在于,所述方法还包括:
将增加至所述全量图库的最新图片对应的图片索引增加至所述历史索引库。
5.如权利要求1所述的方法,其特征在于,所述全量图库中的图片按照所属多级图片类目分布存放在所述服务器集群的多个存储区,每个存储区的图片按照对应的图片编号按序存放,各图片标记有对应的图片标识和所属多级图片类目;
所述接收到应用程序调用图片的请求后,从所述全量图库提取目标图片反馈至所述应用程序包括:
解析所述调用图片的请求携带所需目标图片的目标多级图片类目;
根据所述多级图片类目中各级图片类目对应在所述存储区的存放位置以及各个图片标记的图片标识和所属多级图片类目,从所述全量图库中提取所述目标图片。
6.如权利要求1所述的方法,其特征在于,每日对应一个日增图库,所述方法还包括:
删除不符合预设时间区段的日增图库。
7.如权利要求1所述的方法,其特征在于,所述方法还包括:
通过查询商品历史访问数据确定仍在线使用的商品对应的在线图片,和/或,通过查询图片历史调用数据确定仍在线使用的在线图片;
删除所述全量图库中除所述在线图片之外的图片。
8.如权利要求7所述的方法,其特征在于,所述方法还包括:
查找求模值等于当天对应星期的某个图片类目作为待清理的图片类目;
所述删除所述全量图库中除所述在线图片之外的图片为,针对所述待清理的图片类目,在所述全量图库中删除该图片类目下除所述在线图片之外的图片。
9.如权利要求1所述的方法,其特征在于,在所述通过比对图片索引,将所述日增图库中不存在于所述全量图库的最新图片保存至所述全量图库的同时,所述方法还包括:
将对应的原始图片存在于所述全量图库的最新图片替代所述原始图片保存至所述全量图库。
10.如权利要求1所述的方法,其特征在于,所述方法还包括:
检测到某个传输线程的执行时间超出预设时间时,结束所述传输线程,并重启新的传输线程代替执行相应任务;
和/或,监控网络连接API,当捕获到所述网络连接API发出网络连接异常通知时,结束所有传输线程,并重启新的多个传输线程代替执行相应任务。
11.如权利要求1所述的方法,其特征在于,所述从所述全量图库提取目标图片反馈至所述应用程序为,从所述全量图库查找所述目标图片,提取所述目标图片的图片特征反馈至所述应用程序;
所述图片索引为所述图片的图片编号和图片标识。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于阿里巴巴集团控股有限公司,未经阿里巴巴集团控股有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201510849675.8/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种搜索指令的处理方法及系统
- 下一篇:服务获取方法和装置