[发明专利]基于二进制的分布式数据下载方法、装置、设备及介质在审
申请号: | 202011593608.1 | 申请日: | 2020-12-29 |
公开(公告)号: | CN112671918A | 公开(公告)日: | 2021-04-16 |
发明(设计)人: | 杨小彦 | 申请(专利权)人: | 平安普惠企业管理有限公司 |
主分类号: | H04L29/08 | 分类号: | H04L29/08;G06F16/178 |
代理公司: | 深圳国新南方知识产权代理有限公司 44374 | 代理人: | 汪东峨 |
地址: | 518000 广东省深圳市前海深港合作区前*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 基于 二进制 分布式 数据 下载 方法 装置 设备 介质 | ||
1.一种基于二进制的分布式数据下载方法,其特征在于,所述方法包括以下步骤:
接收到客户端发送的下载请求时,根据所述下载请求中获取二进制目标文件块的编号;
根据所述编号获取至少一台临时服务器;
判断所述临时服务器的缓存器中是否存储有所述编号对应的所述二进制目标文件块;
若在所述缓存器中未找到所述二进制目标文件块,则选取所述分布式集群中负载最低的服务器,得到目标服务器;
从所述目标服务器的存储器中提取所述二进制目标文件块;
将提取的所述二进制目标文件块缓存到所述目标服务器的缓存器中,并从所述目标服务器的缓存器中提取所述二进制目标文件块;
将所述二进制目标文件块发送给所述客户端。
2.根据权利要求1所述的基于二进制的分布式数据下载方法,其特征在于,在所述判断所述临时服务器的缓存器中是否存储有所述编号对应的所述二进制目标文件块的步骤之后,还包括:
若所述临时服务器的缓存器中存储有所述二进制目标文件块,则从所述临时服务器的缓存器中提取所述二进制目标文件块。
3.根据权利要求2所述的基于二进制的分布式数据下载方法,其特征在于,在所述若所述临时服务器的缓存器中存储有所述二进制目标文件块,则从所述临时服务器的缓存器中提取所述二进制目标文件块的步骤中,还包括:
获取所有所述缓存器中存储有所述二进制目标文件块的所述临时服务器;
对获取的所述临时服务器按照接收所述下载请求的次数进行排序;
从排序结果中接收所述下载请求次数最多的所述服务器的缓存器中提取所述二进制目标文件块。
4.根据权利要求3所述的基于二进制的分布式数据下载方法,其特征在于,所述判断所述临时服务器的缓存器中是否存储有所述编号对应的所述二进制目标文件块的步骤还包括:
分多个线程判断所述临时服务器的缓存器是否存储有所述二进制目标文件块。
5.根据权利要求1-4中任一项所述的基于二进制的分布式数据下载方法,其特征在于,在所述在接收到客户端发送的下载请求时,根据所述下载请求中的编号获取所述编号对应的二进制目标文件块的步骤之前,所述方法还包括:
将预设的目标文件转换为二进制目标文件;
分别将所述二进制目标文件存储在所述分布式集群的各服务器的存储器中;
分别将所述二进制目标文件,按预设数据量分割成多个二进制目标文件块,并分别对每一个二进制目标文件块进行编号;
按照所述缓存器的大小将预设数量的所述二进制目标文件块缓存到所述服务器的缓存器中。
6.根据权利要求5所述的基于二进制的分布式数据下载方法,其特征在于,所述按照所述缓存器的大小将预设数量的所述二进制目标文件块缓存到所述服务器的缓存器中的步骤包括:
为所述缓存到所述缓存器中的所述二进制目标文件块设置缓存时间;
若所述二进制目标文件块在所述缓存时间内没有被提取,则从所述服务器的缓存器中删除所述二进制目标文件块。
7.一种基于二进制的分布式数据下载系统,其特征在于,包括分布式集群以及客户端,
所述分布式集群执行以下步骤:
接收到客户端发送的下载请求时,根据所述下载请求中获取二进制目标文件块的编号;
根据所述编号获取至少一台临时服务器;
判断所述临时服务器的缓存器中是否存储有所述编号对应的所述二进制目标文件块;
若在所述缓存器中未找到所述二进制目标文件块,则选取所述分布式集群中负载最低的服务器,得到目标服务器;
从所述目标服务器的存储器中提取所述二进制目标文件块;
将提取的所述二进制目标文件块缓存到所述目标服务器的缓存器中,并从所述目标服务器的缓存器中提取所述二进制目标文件块;
将所述二进制目标文件块发送给所述客户端;
所述客户端执行以下步骤:
将从所述分布式集群中提取的所有二进制目标文件块合并为完整的二进制目标文件;
将所述完整的二进制目标文件转换为对应的目标文件。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于平安普惠企业管理有限公司,未经平安普惠企业管理有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202011593608.1/1.html,转载请声明来源钻瓜专利网。
- 上一篇:一种起重吊装用横梁装置
- 下一篇:一种可释放负离子环保植物纤维泥制备工艺
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置