[发明专利]一种基于MongoDB冷热数据自动分片的方法在审
申请号: | 201910886479.6 | 申请日: | 2019-09-19 |
公开(公告)号: | CN110597468A | 公开(公告)日: | 2019-12-20 |
发明(设计)人: | 程永新;孙玉颖;阮飞鹏 | 申请(专利权)人: | 上海新炬网络技术有限公司 |
主分类号: | G06F3/06 | 分类号: | G06F3/06 |
代理公司: | 31290 上海科律专利代理事务所(特殊普通合伙) | 代理人: | 袁亚军 |
地址: | 201707 上海市青浦区外青*** | 国省代码: | 上海;31 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明公开了一种基于MongoDB冷热数据自动分片的方法,包括以下步骤:步骤S101:扫描各个数据分片的热数据比例值;步骤S102:判断是否有热数据比例值超过预设阈值,如果有热数据比例值超结束;步骤S103:根据数据分区key区间确定适合的数据分片大小;步骤S104:将最大热块数据迁移到最小冷块上。本发明提供的基于MongoDB冷热数据自动分片的方法,通过朴素贝叶斯算法对数据的访问特性进行冷热数据判定,将数据分片中热数据的所占比重作为热负载值以确定数据迁移时机,并根据数据分片之间的热负载差异建立新的数据迁移策略,避免数据分布不均导致热表访问频繁以及数据负载不均衡。 | ||
搜索关键词: | 数据分片 热数据 数据迁移 冷热 热负载 区间确定 数据分布 数据分区 数据负载 数据判定 贝叶斯 不均衡 热表 热块 算法 预设 扫描 访问 时机 | ||
【主权项】:
1.一种基于MongoDB冷热数据自动分片的方法,其特征在于,包括以下步骤:/n步骤S101:扫描各个数据分片的热数据比例值;/n步骤S102:判断是否有热数据比例值超过预设阈值,如果有热数据比例值超过预设阈值,则跳转到步骤S103,如果没有热数据比例值超过预设阈值,则结束;/n步骤S103:根据数据分区key区间确定适合的数据分片大小;/n步骤S104:将最大热块数据迁移到最小冷块上。/n
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于上海新炬网络技术有限公司,未经上海新炬网络技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201910886479.6/,转载请声明来源钻瓜专利网。