[发明专利]一种数据分片分布式处理方法、系统、介质和电子设备在审
申请号: | 201910386117.0 | 申请日: | 2019-05-09 |
公开(公告)号: | CN110334091A | 公开(公告)日: | 2019-10-15 |
发明(设计)人: | 孙龙宝 | 申请(专利权)人: | 重庆天蓬网络有限公司 |
主分类号: | G06F16/22 | 分类号: | G06F16/22;G06F16/23;G06F16/2458;G06F16/28;G06F16/27 |
代理公司: | 北京酷爱智慧知识产权代理有限公司 11514 | 代理人: | 袁克来 |
地址: | 401135 重*** | 国省代码: | 重庆;50 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | 本发明提供一种数据分片分布式处理方法、系统、介质及电子设备,包括:将多个初始化服务器注册到zookeeper集群中;创建所述多个初始化服务器的一致性哈希环;接收单次点击消耗量数据并直接写入mysql关系型数据库;通过所述单次点击消耗量数据中的用户信息及所述一致性哈希环获取距离用户最近的服务器信息;将所述单次点击消耗量数据存储到获取的所述服务器需要处理的redis列表队列中;从服务器的所述redis列表队列中获取所述单次点击消耗量数据,并进行逻辑处理。 | ||
搜索关键词: | 消耗量数据 服务器 分布式处理 电子设备 数据分片 初始化 哈希 队列 关系型数据库 服务器信息 服务器注册 逻辑处理 用户信息 集群 写入 存储 创建 | ||
【主权项】:
1.一种数据分片分布式处理方法,该方法应用于数据分片分布式处理系统,该系统包括注册模块、创建模块、接收模块、获取模块、存储模块、以及处理模块,其特征在于,该方法包括:步骤1,注册模块将多个初始化服务器注册到zookeeper集群中;步骤2,创建模块创建所述多个初始化服务器的一致性哈希环;步骤3,接收模块接收单次点击消耗量数据并直接写入mysql关系型数据库;步骤4,获取模块通过所述单次点击消耗量数据中的用户信息以及所述一致性哈希环,获取距离用户最近的服务器信息;步骤5,存储模块将所述单次点击消耗量数据存储到获取的所述服务器需要处理的redis列表队列中;步骤6,处理模块从服务器的所述redis列表队列中获取所述单次点击消耗量数据,并进行逻辑处理。
下载完整专利技术内容需要扣除积分,VIP会员可以免费下载。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于重庆天蓬网络有限公司,未经重庆天蓬网络有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/patent/201910386117.0/,转载请声明来源钻瓜专利网。