[发明专利]一种基于多客户端轮循排队的数据上传方法及系统有效
申请号: | 201510890149.6 | 申请日: | 2015-12-07 |
公开(公告)号: | CN105357317B | 公开(公告)日: | 2019-06-07 |
发明(设计)人: | 范泽龙 | 申请(专利权)人: | 金蝶软件(中国)有限公司 |
主分类号: | H04L29/08 | 分类号: | H04L29/08 |
代理公司: | 深圳市深佳知识产权代理事务所(普通合伙) 44285 | 代理人: | 王仲凯 |
地址: | 518057 广东省深圳市南山区*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 基于 客户端 排队 数据 上传 方法 系统 | ||
1.一种基于多客户端轮循排队的数据上传方法,其特征在于,包括:
按照预设的数据上传周期,定期根据预设终端评分规则,对当前数据上传周期内所有客户端中的每一客户端进行评分;其中,每一客户端的当前综合性能优良程度与该客户端当前的评分呈正相关关系;
按照评分由高到低的顺序,对所有客户端进行排序,并从排序好的所有客户端中选取出前N个客户端,其中,N为正整数;
对当前数据上传周期内需要进行上传的大数据进行分割处理,并将分割处理后得到的所有小数据块不重复地分配至所述前N个客户端,以利用所述前N个客户端,将所有小数据块并行地上传至云服务器;
其中,所述预设终端评分规则为根据当前所有客户端的网速状况、硬件性能参数、数据上传行为对自身性能的影响程度、负载压力状况以及历史数据传输效果,预先建立的评分规则;
并且,所述将分割处理后得到的所有小数据块不重复地分配至所述前N个客户端的过程,包括:
根据所述前N个客户端的评分情况,对分割处理后得到的所有小数据块进行分组,相应地得到N组小数据块;其中,所述N组小数据块与所述前N个客户端一一对应,并且在所述前N个客户端中,每一客户端对应的一组小数据块中所包含的小数据块的数量与该客户端的评分呈正相关关系;将所述N组小数据块中的每一组小数据块分配至所述前N个客户端中相应的客户端。
2.根据权利要求1所述的基于多客户端轮循排队的数据上传方法,其特征在于,客户端的历史数据传输效果包括数据上传准确率、数据上传成功率以及单位时间内上传数据量。
3.根据权利要求2所述的基于多客户端轮循排队的数据上传方法,其特征在于,还包括:
当所述前N个客户端中的任一客户端完成当前数据上传周期内的数据上传任务后,记录相应的数据上传日志文件,并根据该数据上传日志文件分析出相应的数据传输效果。
4.根据权利要求1所述的基于多客户端轮循排队的数据上传方法,其特征在于,在所述将所述N组小数据块中的每一组小数据块分配至所述前N个客户端中相应的客户端过程之前,还包括:
根据所述前N个客户端的评分情况以及每一客户端对应的小数据块的数量情况,为所述前N个客户端中的每一客户端分配相应的数据上传时间片,以使每一客户端在对应的数据上传时间片内将接收到的小数据块并行地上传至所述云服务器;其中,任一客户端所对应的数据上传时间片的时间长度均不大于当前数据上传周期的时间长度。
5.一种基于多客户端轮循排队的数据上传系统,其特征在于,包括:
客户端评分模块,按照预设的数据上传周期,定期根据预设终端评分规则,对当前数据上传周期内所有客户端中的每一客户端进行评分;其中,每一客户端的当前综合性能优良程度与该客户端当前的评分呈正相关关系;
客户端选取模块,按照评分由高到低的顺序,对所有客户端进行排序,并从排序好的所有客户端中选取出前N个客户端,其中,N为正整数;
大数据分配模块,对当前数据上传周期内需要进行上传的大数据进行分割处理,并将分割处理后得到的所有小数据块不重复地分配至所述前N个客户端,以利用所述前N个客户端,将所有小数据块并行地上传至云服务器;
其中,所述预设终端评分规则为根据当前所有客户端的网速状况、硬件性能参数、数据上传行为对自身性能的影响程度、负载压力状况以及历史数据传输效果,预先建立的评分规则;
并且,所述大数据分配模块包括:
大数据分割单元,用于对当前数据上传周期内需要进行上传的大数据进行分割处理;
数据块分组单元,用于根据所述前N个客户端的评分情况,对所述大数据分割单元进行分割处理后得到的所有小数据块进行分组,相应地得到N组小数据块;其中,所述N组小数据块与所述前N个客户端一一对应,并且在所述前N个客户端中,每一客户端对应的一组小数据块中所包含的小数据块的数量与该客户端的评分呈正相关关系;
数据块分配单元,用于将所述N组小数据块中的每一组小数据块分配至所述前N个客户端中相应的客户端,以利用所述前N个客户端,将所有小数据块并行地上传至所述云服务器。
6.根据权利要求5所述的基于多客户端轮循排队的数据上传系统,其特征在于,所述大数据分配模块还包括:
上传时间分配单元,用于根据所述前N个客户端的评分情况以及每一客户端对应的小数据块的数量情况,为所述前N个客户端中的每一客户端分配相应的数据上传时间片,以使每一客户端在对应的数据上传时间片内将接收到的小数据块并行地上传至所述云服务器;其中,任一客户端所对应的数据上传时间片的时间长度均不大于当前数据上传周期的时间长度。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于金蝶软件(中国)有限公司,未经金蝶软件(中国)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201510890149.6/1.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置