[发明专利]云计算平台中的任务处理系统、设备及方法有效
申请号: | 201310244431.8 | 申请日: | 2013-06-19 |
公开(公告)号: | CN103347055B | 公开(公告)日: | 2016-04-20 |
发明(设计)人: | 何锐邦;唐会军 | 申请(专利权)人: | 北京奇虎科技有限公司;奇智软件(北京)有限公司 |
主分类号: | H04L29/08 | 分类号: | H04L29/08;G06F9/50 |
代理公司: | 北京华沛德权律师事务所 11302 | 代理人: | 刘丽君 |
地址: | 100088 北京市西城区新*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 计算 平台 中的 任务 处理 系统 设备 方法 | ||
1.一种云计算平台中的任务处理设备,包括:
文件信息获取器,被配置为从存储任务数据文件的存储节点中获取各任 务数据文件的信息,并基于各任务数据文件的信息来确定各任务数据文件的 编号,其中各任务数据文件的编号与任务数据文件产生的先后顺序相关;
节点信息确定器,被配置为获取任务执行节点的信息;所述任务执行节 点的信息包括所述任务执行节点的数量以及所述任务执行节点的编号;以及
任务分配器,被配置为根据各任务数据文件的编号和任务执行节点的信 息,将任务数据文件均匀分配到对应的任务执行节点进行处理,其中将相邻 编号的任务数据文件分配给不同的任务执行节点,以使得每个任务执行节点 上处理相同或基本相同数量的任务数据文件,而且同一任务执行节点上处理 的任务数据文件的编号呈等差数列分布或者基本等差数列分布,所述基本相 同数量的任务数据文件是指不同任务节点上分配的任务数据文件的数量之差 不超过一定的阈值,所述基本等差数列是指数列中每一项与它的前一项的差 值不是同一个常数,但是各个差值之间的差距小于某阈值。
2.如权利要求1所述的云计算平台中的任务处理设备,还包括:
取模运算的结果计算器,被配置为以任务执行节点的数量为模数,对任 务数据文件的编号进行取模运算;
所述任务分配器被配置为根据所述取模运算的结果计算器的运算结果和 任务执行节点的信息,将任务数据文件均匀分配到对应的任务执行节点进行 处理。
3.如权利要求2所述的云计算平台中的任务处理设备,所述任务分配器 被配置为根据取模运算的结果与各个任务执行节点的编号进行匹配,如果某 任务数据文件的编号取模运算结果与某任务执行节点的编号相等,则将该任 务数据文件分配到该任务执行节点进行处理。
4.如权利要求1-3中任一个所述的云计算平台中的任务处理设备,其中:
各任务执行节点的编号为从0到N-1的连续整数,其中,N为任务执行 节点的数量;
各任务数据文件的编号为连续整数。
5.如权利要求1-3中任一个所述的云计算平台中的任务处理设备,其中 各任务数据文件的信息包括各任务数据文件的标识信息,所述任务数据文件 的标识信息中包含有任务数据文件的编号,其中,所述任务数据文件的编号 为按照任务数据文件产生的先后顺序进行的连续编号;
所述文件信息获取器被配置为从各任务数据文件的信息中获取各任务数 据文件的标识信息,并从各个任务数据文件的标识信息中提取各个任务数据 文件的编号。
6.如权利要求1-3中任一个所述的云计算平台中的任务处理设备,其中 各任务数据文件的信息包括各任务数据文件的标识信息以及各任务数据文件 产生的先后顺序信息,所述文件信息获取器被配置为从各任务数据文件的信 息中获取各任务数据文件的标识信息以及各任务数据文件产生的先后顺序信 息,按照所述先后顺序信息对各任务数据文件进行连续编号。
7.一种云计算平台,包括:
存储节点,被配置为存储任务数据文件;
任务分配节点,包括如权利要求1至6任一项所述的云计算平台的任务 处理设备;以及
任务执行节点,被配置为根据任务处理设备的分配结果,从存储节点下 载任务数据文件,并进行处理。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于北京奇虎科技有限公司;奇智软件(北京)有限公司,未经北京奇虎科技有限公司;奇智软件(北京)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201310244431.8/1.html,转载请声明来源钻瓜专利网。
- 上一篇:基于企业内网的异地电子数据恢复系统
- 下一篇:一种汽车上的自助服务系统