[发明专利]一种数据分析任务的分配方法有效
申请号: | 201910967760.2 | 申请日: | 2019-10-12 |
公开(公告)号: | CN110727516B | 公开(公告)日: | 2020-08-28 |
发明(设计)人: | 陈来宾 | 申请(专利权)人: | 江苏卫健信息科技有限公司 |
主分类号: | G06F9/50 | 分类号: | G06F9/50 |
代理公司: | 北京天盾知识产权代理有限公司 11421 | 代理人: | 解敬文;施艳荣 |
地址: | 215000 江苏省苏州市高新*** | 国省代码: | 江苏;32 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 一种 数据 分析 任务 分配 方法 | ||
1.一种数据分析任务的分配方法,其特征在于,包括以下步骤:
步骤100:分配服务器接收数据分析任务的任务分配请求,所述任务分配请求中包括待分配任务的存储地址、任务强度和分析对象;其中,所述任务强度是该待分配任务在标准服务器上运行并分析预定数据量所需要的时间,所述分析对象是该待分配任务需要分析的数据记录类型;
步骤200:所述分配服务器获取每台任务服务器的当前任务强度值;其中,一台任务服务器的当前任务强度值指的是该任务服务器上当前执行的所有数据分析任务的剩余执行时间之和;
步骤300:所述分配服务器将待分配任务分配给当前任务强度值最小的任务服务器;
所述步骤200中,任务服务器的当前任务强度值的具体计算方法包括:
步骤210:任务服务器在运行每个任务之前,计算该任务的预计执行总时间;设数据分析任务Taski的任务强度为Ki,该任务服务器的性能值为P,Taski需要分析的数据量为Di,标准服务器的标准性能值为P0,所述预定数据量为D0,则该任务服务器计算Taski的预计执行总时间Ti为:
其中,任务服务器根据数据分析任务的分析对象,确定其需要分析的数据量;
步骤220:任务服务器统计当前运行的每个任务的已执行时间;
步骤230:任务服务器计算每个任务的剩余执行时间,所述任务的剩余执行时间等于任务的预计执行总时间减去任务的已执行时间;任务服务器的当前任务强度值为该任务服务器上当前执行的所有任务的剩余执行时间之和。
2.根据权利要求1所述的方法,其特征在于,所述标准服务器是一台具有预设的固定配置的服务器,所述固定配置包括硬件配置和软件配置。
3.根据权利要求1-2任意一项所述的方法,其特征在于,所述数据量是数据库中相应记录的数量。
4.根据权利要求1-2任意一项所述的方法,其特征在于,使用预定的benchmark程序来确定和量化标准服务器和任务服务器的性能值。
5.根据权利要求1所述的方法,其特征在于,所述待分配任务是外部发起的,需要分配服务器进行分配的新的数据分析任务。
6.根据权利要求1所述的方法,其特征在于,所述待分配任务是已经存储于分配服务器的数据分析任务。
7.根据权利要求6所述的方法,其特征在于,所述待分配任务是定期执行的数据分析任务。
8.根据权利要求1所述的方法,其特征在于,数据分析任务所分析的数据存储于数据服务器中。
9.根据权利要求8所述的方法,其特征在于,数据服务器运行数据库系统以存储所述数据。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于江苏卫健信息科技有限公司,未经江苏卫健信息科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910967760.2/1.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置