[发明专利]一种基于Hbase的海量图片存储方法及装置在审
申请号: | 201410425822.4 | 申请日: | 2014-08-26 |
公开(公告)号: | CN104199899A | 公开(公告)日: | 2014-12-10 |
发明(设计)人: | 房体盈;辛国茂 | 申请(专利权)人: | 浪潮(北京)电子信息产业有限公司 |
主分类号: | G06F17/30 | 分类号: | G06F17/30 |
代理公司: | 北京安信方达知识产权代理有限公司 11262 | 代理人: | 王丹;李丹 |
地址: | 100085 北京市海*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明公开了一种基于Hbase的海量图片存储方法及装置,包括:读取预设大小的结构化文本信息,并创建一个Mapfile文件;其中,结构化文本信息为图片的属性信息与图片的原始索引信息;确定读取的预设大小的结构化文本信息所对应的各个图片,将确定的各个图片以字节流的形式写入到已建立的Mapfile文件中;将读取的预设大小的结构化文本信息中的各个图片的属性信息以及各个图片所在的Mapfile文件的索引信息存储至HBase表中。本发明技术方案实现了将几十K的小图片合并成一个大文件,避免了因将海量几十K小图片直接存放到HDFS上产生大量元数据从而导致占用大量内存,避免了将海量图片存放到HBase的过程中导致的频繁的Hfile文件的Compaction及Region split,极大地提高了写入速度。 | ||
搜索关键词: | 一种 基于 hbase 海量 图片 存储 方法 装置 | ||
【主权项】:
一种基于Hbase的海量图片存储方法,其特征在于,包括:读取预设大小的结构化文本信息,并创建一个Mapfile文件;其中,结构化文本信息包括图片的属性信息与图片的原始索引信息;确定读取的预设大小的结构化文本信息所对应的各个图片,将确定的各个图片以字节流的形式写入到已建立的Mapfile文件中;将读取的预设大小的结构化文本信息中的各个图片的属性信息以及各个图片所在的Mapfile文件的索引信息存储至HBase表中。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于浪潮(北京)电子信息产业有限公司;,未经浪潮(北京)电子信息产业有限公司;许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201410425822.4/,转载请声明来源钻瓜专利网。