[发明专利]一种基于Hbase二级索引的数据统计方法在审
申请号: | 201610062000.3 | 申请日: | 2016-01-29 |
公开(公告)号: | CN105740410A | 公开(公告)日: | 2016-07-06 |
发明(设计)人: | 牛硕;周正德 | 申请(专利权)人: | 浪潮电子信息产业股份有限公司 |
主分类号: | G06F17/30 | 分类号: | G06F17/30 |
代理公司: | 济南信达专利事务所有限公司 37100 | 代理人: | 姜明 |
地址: | 250101 山东*** | 国省代码: | 山东;37 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明提供一种基于Hbase二级索引的数据统计方法,涉及一种大数据统计的技术,1)通过Coprocessor的Observer模式,在Hbase新增数据时,实时创建该表的二级索引数据,格式为Date_TableName_RowKey;2)将时间作为StartRow与StartRow,书写MR任务,进行数据统计,并删除7日之前的所有索引数据;3)通过crontab设置定时任务,每日自动执行进行数据统计。本方法有着环境易搭建、数据统计及时、准确并且拥有良好的可扩展性。 | ||
搜索关键词: | 一种 基于 hbase 二级 索引 数据 统计 方法 | ||
【主权项】:
一种基于Hbase二级索引的数据统计方法,其特征在于,具体步骤为:1)通过Coprocessor的Observer模式,在Hbase新增数据时,实时创建该表的二级索引数据,格式为Date_TableName_RowKey;2)将时间作为StartRow与StartRow,书写MR任务,进行数据统计,并删除7日之前的所有索引数据;3)通过crontab设置定时任务,每日自动执行进行数据统计。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于浪潮电子信息产业股份有限公司,未经浪潮电子信息产业股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201610062000.3/,转载请声明来源钻瓜专利网。