[发明专利]一种基于车联网Hbase时序数据的预分区方法在审
申请号: | 201911344922.3 | 申请日: | 2019-12-24 |
公开(公告)号: | CN113031848A | 公开(公告)日: | 2021-06-25 |
发明(设计)人: | 陈福林;游锋锋;杨俊辉;曾夺 | 申请(专利权)人: | 厦门雅迅网络股份有限公司 |
主分类号: | G06F3/06 | 分类号: | G06F3/06 |
代理公司: | 厦门市精诚新创知识产权代理有限公司 35218 | 代理人: | 何家富 |
地址: | 361000 福建省厦门市*** | 国省代码: | 福建;35 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 基于 联网 hbase 时序 数据 分区 方法 | ||
1.一种基于车联网Hbase时序数据的预分区方法,其特征在于,包括以下步骤:
S1.定义Hbase时序数据的RowKey生成规则算法,得到固定长度为23位的车辆上报一条数据的RowKey值,其中,RowKey值前8位作为预分区的splitKey值;
S2.根据splitKey值创建预分区;
S3.根据splitKey值为新增车辆分配分区,当新增车辆的splitKey值对应的分区不存在时,根据该splitKey值创建新分区并将新增车辆的数据写入该新分区中。
2.如权利要求1所述的方法,其特征在于,S1的具体过程为:根据每个分区分配车辆数N,对车辆id(车辆id从1开始连续递增)进行取整/取余运算,获得分组号和组内序号,并分别转成固定长度的十六进制数,长度不足的补0,其中,分组号4位,组内序号3位;再根据车辆数据上报的时间,将上报时间按年、月、日、时、分、秒、毫秒进行拆解,并分别转成固定长度的十六进制数,长度不足的补0,年份3位、月份1位、日、时、分、秒2位、毫秒3位;最后,再将这些十六进制数按分组号、年、月、组内序号、日、时、分、秒、毫秒的顺序拼接成车辆上报一条数据的RowKey值,长度固定为23位,最后一位为预留位。
3.如权利要求2所述的方法,其特征在于,S2的具体过程为:根据获取的当前月与下一个月的分区splitKey值,创建预分区;当项目运行到下个月时,可继续根据splitKey值提前将下下个月的分区通过hbase自带的新增分区的方法,创建新的分区,以此类推,创建后续月份所需要的分区。
4.如权利要求2所述的方法,其特征在于,所述预留位的值为26个英文字母a~z之一。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于厦门雅迅网络股份有限公司,未经厦门雅迅网络股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201911344922.3/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种便于清洗的食品加工机
- 下一篇:一种搅拌装置