[发明专利]一种基于HBase压缩方法在审
申请号: | 201310728845.8 | 申请日: | 2013-12-26 |
公开(公告)号: | CN103729429A | 公开(公告)日: | 2014-04-16 |
发明(设计)人: | 宗栋瑞;郭美思 | 申请(专利权)人: | 浪潮电子信息产业股份有限公司 |
主分类号: | G06F17/30 | 分类号: | G06F17/30 |
代理公司: | 暂无信息 | 代理人: | 暂无信息 |
地址: | 250014 山东*** | 国省代码: | 山东;37 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明提供一种基于HBase压缩方法,其具体实现过程为:部署分布式集群;获取HBase表文件路径;通过压缩接口实现对属性值的压缩,这里的属性值是指HBase中列存储数据的属性值;对每个列文件属性值进行压缩,得到压缩数据三元组,即rowkey位置信息,列属性值,重复次数。该一种基于HBase压缩方法和现有技术相比,可以减少数据的存储空间,大大减少数据处理时间,提高数据处理效率,能使集群保存更多的数据,延长集群的使用寿命;实用性强,易于推广。 | ||
搜索关键词: | 一种 基于 hbase 压缩 方法 | ||
【主权项】:
一种基于HBase压缩方法,其特征在于其具体实现过程为:一、部署分布式集群;二、获取HBase表文件路径;三、通过压缩接口实现对属性值的压缩,这里的属性值是指HBase中列存储数据的属性值;四、对每个列文件属性值进行压缩,得到压缩数据三元组,即rowkey位置信息,列属性值,重复次数,其中每一列中的列属性值与rowkey位置信息作为压缩条件,然后根据特定列中属性值的重复次数记录压缩态数据。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于浪潮电子信息产业股份有限公司,未经浪潮电子信息产业股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201310728845.8/,转载请声明来源钻瓜专利网。