[发明专利]对不同数据服务器测试的调度方法及相关装置在审
申请号: | 201910371988.5 | 申请日: | 2019-05-06 |
公开(公告)号: | CN110196774A | 公开(公告)日: | 2019-09-03 |
发明(设计)人: | 陈家荣 | 申请(专利权)人: | 平安科技(深圳)有限公司 |
主分类号: | G06F9/50 | 分类号: | G06F9/50 |
代理公司: | 深圳市隆天联鼎知识产权代理有限公司 44232 | 代理人: | 刘抗美 |
地址: | 518000 广东省深圳市福田区福*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 数据服务器 数据分析系统 处理负荷 处理节点 数据分析 测试 测试技术领域 任务处理过程 调度 计算机设备 存储介质 调用请求 任务转移 数据单位 相关装置 周期测试 查询 响应 保证 统一 维护 | ||
1.一种对不同数据服务器测试的调度的方法,用于对包含多个处理节点的数据分析系统的测试的调度,其特征在于,所述方法包括:
每隔预设周期测试所述数据分析系统所有处理节点的性能,判断所述所有处理节点的性能是否合格;
若所述处理节点的测试结果不合格,将所述测试结果不合格的处理节点的数据分析任务转移到测试结果为合格的处理节点,以便对所述测试结果不合格的处理节点进行维护;
响应于数据服务器的任务处理请求,查询所述数据分析系统当前周期所有测试结果为合格的处理节点的处理负荷;
选择所述所有测试结果为合格的处理节点中处理负荷最小的处理节点作为目标处理节点,使所述目标处理节点处理所述数据服务器数据分析任务。
2.如权利要求1所述的方法,其特征在于,所述处理负荷用于指示所述节点的处理器的剩余使用率,所述选择所述所有测试结果为合格的节点中处理负荷最小的节点作为目标处理节点,包括:
选择所述所有测试结果为合格的节点中,处理器的剩余使用率最多的节点作为所述目标处理节点。
3.如权利要求1所述的方法,其特征在于,所述处理负荷包括所述节点的存储容量,所述选择所述所有节点中处理负荷最小的节点作为处理节点包括:
选择所述所有测试结果为合格的节点中,剩余存储容量大小最大的节点作为所述目标处理节点。
4.如权利要求1所述的方法,其特征在于,所述节点的处理负荷包括所述节点的处理器的剩余使用率和剩余存储容量,所述选择所述所有节点中处理负荷最小的节点作为处理节点包括:
分别判断所述数据分析系统当前周期所有测试结果为合格的处理节点的剩余存储容量是否小于预定容量阈值、处理器的剩余使用率是否小于预定使用率阈值;
若所述处理器的剩余使用率小于预定使用率阈值,设定所述处理器的剩余使用率的权重为1,若所述处理器的剩余使用率不小于预定使用率阈值,设定所述处理器的剩余使用率的权重为所述处理器的剩余使用率和剩余存储容量百分比之差的绝对值;
若所述节点的剩余存储容量小于预定存储容量阈值,设定所述节点的剩余存储容量的权重为1,若所述节点的剩余存储容量不小于预定存储容量阈值,设定所述节点的剩余存储容量的权重为所述处理器的剩余使用率和剩余存储容量百分比之差的绝对值;
计算所述节点的处理负荷包括所述节点的处理器的剩余使用率和剩余存储容量的加权和,选取加权和最大的节点作为所述目标处理节点。
5.如权利要求1所述的方法,其特征在于,在若所述节点的测试结果不合格,将所述测试结果不合格的节点的数据分析任务转移到其他处理节点,以方便对所述测试结果不合格的节点进行维护之后,所述方法还包括:
若所述测试结果不合格的节点维护完成,测试所述维护完成的节点的性能,判断所述维护完成的节点的性能是否合格;
若测试结果合格,将所述测试结果合格的处理节点直接进入等待处理负荷查询的阶段。
6.如权利要求1所述的方法,其特征在于,所述将所述测试结果不合格的节点的数据分析任务转移到所述目标处理节点进行处理,包括:
查询所述数据服务器的任务处理请求中任务在处理时所占用的存储容量,若所述存储容量大于预设阈值,则对所述数据服务器的任务处理请求中任务进行分割,并记录分割顺序,其中,所述分割后的每份数据分析任务的存储容量都小于所述阈值;
按照分割的先后顺序,依次将所述每份数据分析任务转移到所述目标处理节点进行处理。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于平安科技(深圳)有限公司,未经平安科技(深圳)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201910371988.5/1.html,转载请声明来源钻瓜专利网。