[发明专利]一种分布式缓存更新方法及缓存更新系统在审
申请号: | 201611245664.X | 申请日: | 2016-12-29 |
公开(公告)号: | CN106713470A | 公开(公告)日: | 2017-05-24 |
发明(设计)人: | 张海 | 申请(专利权)人: | 北京奇艺世纪科技有限公司 |
主分类号: | H04L29/08 | 分类号: | H04L29/08 |
代理公司: | 北京柏杉松知识产权代理事务所(普通合伙)11413 | 代理人: | 项京,马敬 |
地址: | 100080 北京市海淀*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 分布式 缓存 更新 方法 系统 | ||
1.一种分布式缓存更新方法,其特征在于,应用于缓存更新系统,所述缓存更新系统包括:数据组装服务器、数据缓存区、缓存更新服务器和缓存存储服务器;所述方法包括:
所述数据组装服务器获得待缓存数据;按照预设规则将所述待缓存数据组装为缓存包;将所述缓存包发送给所述数据缓存区进行存储;
所述缓存更新服务器从所述数据缓存区中获得所述缓存包;根据所述缓存包对与该缓存更新服务器位于同一机房的缓存存储服务器进行缓存更新。
2.根据权利要求1所述的方法,其特征在于,所述数据缓存区为:
Kafka集群。
3.根据权利要求1所述的方法,其特征在于,所述按照预设规则将所述待缓存数据组装为缓存包,包括:
对获得的待缓存数据进行过滤;
按照预设规则将过滤后的待缓存数据组装为缓存包。
4.根据权利要求1所述的方法,其特征在于,所述按照预设规则将所述待缓存数据组装为缓存包,包括:
判断获得的待缓存数据的大小是否大于预设阈值;
如果是,将所述待缓存数据拆分为均不大于预设阈值的数据;
按照预设规则将拆分后的数据分别组装为缓存包。
5.根据权利要求1所述的方法,其特征在于,所述缓存更新服务器从所述数据缓存区中获得所述缓存包,包括:
所述缓存更新服务器从所述数据缓存区中以pull方式获得所述缓存包。
6.根据权利要求1所述的方法,其特征在于,缓存包中包含有机房标识信息;
所述根据所述缓存包对与该缓存更新服务器位于同一机房的缓存存储服务器进行缓存更新,包括:
根据所述标识信息判断所述缓存包是否属于所述缓存更新服务器所处机房;
如果是,根据所述缓存包对与该缓存更新服务器位于同一机房的缓存存储服务器进行缓存更新。
7.根据权利要求1所述的方法,其特征在于,所述缓存更新系统还包括:更新检测服务器;所述方法还包括:
所述更新检测服务器根据缓存更新日志中各个步骤的处理状态码,判断缓存是否更新成功;
如果否,向所述数据组装服务器发送缓存更新不成功消息,以重新更新缓存。
8.一种缓存更新系统,其特征在于,所述系统包括:数据组装服务器、数据缓存区、缓存更新服务器和缓存存储服务器;所述数据组装服务器包括:第一获得模块、组装模块和第一发送模块;所述缓存更新服务器包括:第二获得模块和更新模块,其中,
所述第一获得模块,用于获得待缓存数据;
所述组装模块,用于按照预设规则将所述待缓存数据组装为缓存包;
所述第一发送模块,用于将所述缓存包发送给所述数据缓存区进行存储;
所述第二获得模块,用于从所述数据缓存区中获得所述缓存包;
所述更新模块,用于根据所述缓存包对与该缓存更新服务器位于同一机房的缓存存储服务器进行缓存更新。
9.根据权利要求8所述的系统,其特征在于,所述数据缓存区为:
Kafka集群。
10.根据权利要求8所述的系统,其特征在于,所述组装模块,包括:
过滤单元,用于对获得的待缓存数据进行过滤;
第一组装单元,用于按照预设规则将过滤后的待缓存数据组装为缓存包。
11.根据权利要求8所述的系统,其特征在于,所述组装模块,包括:
第一判断单元,用于判断获得的待缓存数据的大小是否大于预设阈值;
拆分单元,用于在获得的待缓存数据的大小大于预设阈值的情况下,将所述待缓存数据拆分为均不大于预设阈值的数据;
第二组装单元,用于按照预设规则将拆分后的数据分别组装为缓存包。
12.根据权利要求8所述的系统,其特征在于,所述第二获得模块,具体用于:
从所述数据缓存区中以pull方式获得所述缓存包。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京奇艺世纪科技有限公司,未经北京奇艺世纪科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201611245664.X/1.html,转载请声明来源钻瓜专利网。