[发明专利]分布式队列处理方法及系统有效
申请号: | 201410856985.8 | 申请日: | 2014-12-31 |
公开(公告)号: | CN104601491B | 公开(公告)日: | 2018-11-30 |
发明(设计)人: | 韦昌佗;王玥;高洋 | 申请(专利权)人: | 微梦创科网络科技(中国)有限公司 |
主分类号: | H04L12/863 | 分类号: | H04L12/863 |
代理公司: | 北京国昊天诚知识产权代理有限公司 11315 | 代理人: | 许志勇 |
地址: | 100080 北京*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 分布式队列 数据处理 发送方 失败 存储 队列服务器 保证系统 存储装置 推送数据 队列 申请 | ||
1.一种分布式队列处理方法,其特征在于,应用于队列处理器,所述队列处理器包括重处理数据存储装置,所述方法包括:
访问所述重处理数据存储装置;
若所述重处理数据存储装置中有数据,从所述重处理数据存储装置读取数据至待处理数据存储装置;
若所述重处理数据存储装置中没有数据,按有序方式、顺序方式和随机方式中的任一方式获取队列服务器地址,连接所述队列服务器,从所述队列服务器读取数据至待处理数据存储装置;
处理所述数据;
若所述数据处理失败,存储所述数据至重处理数据存储装置,供重新处理;其中,所述重处理数据存储装置为重处理数据存储目录和/或重处理数据服务器;
在处理所述数据后,将所述数据传送至数据同步服务器。
2.如权利要求1所述的方法,其特征在于,所述方法还包括:
在所述数据处理成功后或所述数据存储至所述重处理数据存储装置后,删除所述待处理数据存储装置中的所述数据。
3.如权利要求2所述的方法,其特征在于,所述方法还包括:
所述若所述数据处理失败,存储所述数据至重处理数据存储装置,供重新处理,具体包括:
若所述数据处理失败,存储所述数据至处理失败数据存储装置,并根据操作指令再将所述数据从所述处理失败数据存储装置转存至所述重处理数据存储装置。
4.如权利要求1所述的方法,其特征在于,如果从所述重处理数据存储装置读取数据至待处理数据存储装置,所述方法还包括:
若所述数据处理成功,删除所述重处理数据存储装置中的所述数据。
5.如权利要求1-4中任意一项所述的方法,其特征在于,所述方法还包括:
访问所述数据同步服务器,并下载所述数据同步服务器中的数据。
6.一种分布式队列处理系统,其特征在于,应用于队列处理器,所述队列处理器包括重处理数据存储装置,所述系统包括:
数据读取装置,用于访问所述重处理数据存储装置,若所述重处理数据存储装置中有数据,从所述重处理数据存储装置读取数据;若所述重处理数据存储装置中没有数据,按有序方式、顺序方式和随机方式中的任一方式获取队列服务器地址,连接所述队列服务器,从所述队列服务器读取数据至待处理数据存储装置;
数据处理装置,用于处理所述数据;
重处理数据存储装置,用于当所述数据处理失败时,存储所述数据,供重新处理;其中,所述重处理数据存储装置为重处理数据存储目录和/或重处理数据服务器;
同步数据上传装置,用于将数据传送至数据同步服务器。
7.如权利要求6所述的系统,其特征在于,所述系统还包括:
待处理数据存储装置,用于接收所述数据读取装置读取的数据,并在所述数据处理成功后或所述数据存储至所述重处理数据存储装置后,删除所述数据。
8.如权利要求7所述的系统,其特征在于,所述系统还包括:
处理失败数据存储装置,用于当所述数据处理失败时,存储所述数据,并根据操作指令再将所述数据转存至所述重处理数据存储装置。
9.如权利要求6所述的系统,其特征在于,
所述重处理数据存储装置还用于,接收所述数据读取装置从所述队列服务器读取的数据;以及若所述数据处理成功,删除所述数据。
10.如权利要求6-9中任意一项所述的系统,其特征在于,所述系统还包括:
同步数据下载装置,用于访问所述数据同步服务器,并下载所述数据同步服务器中的数据。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于微梦创科网络科技(中国)有限公司,未经微梦创科网络科技(中国)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201410856985.8/1.html,转载请声明来源钻瓜专利网。
- 上一篇:低速无线网络中用于长分组的改进分段
- 下一篇:一种扩展物理端口的系统