[发明专利]一种多节点系统的数据处理方法在审
申请号: | 201611111267.3 | 申请日: | 2016-12-02 |
公开(公告)号: | CN108156207A | 公开(公告)日: | 2018-06-12 |
发明(设计)人: | 安西民;林殷;朱巧霞 | 申请(专利权)人: | 航天星图科技(北京)有限公司 |
主分类号: | H04L29/08 | 分类号: | H04L29/08;G06F17/30 |
代理公司: | 北京安博达知识产权代理有限公司 11271 | 代理人: | 徐国文 |
地址: | 101399 北京市顺义区国*** | 国省代码: | 北京;11 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 数据处理 多节点系统 控制节点 数据处理节点 计算节点 系统处理 运行负载 | ||
本发明涉及一种多节点系统的数据处理方法,从多个计算节点中选择其一充当数据处理节点,将数据处理准备工作从控制节点中分离出来,减轻控制节点的运行负载,加快系统处理速度。
【技术领域】
本发明属于数据处理领域,尤其涉及适用于多节点系统的数据处理方法。
【背景技术】
近年来随着网络技术的发展,数据处理是计算系统通常可以提供的外部服务,现有技术中对于多节点系统而言,数据处理服务通常是由控制节点提供,由于数据处理要耗费比较多的时间,控制节点进行数据处理工作必然会占用其相当的计算资源,由于控制节点还要进行任务的调度、分配和资源控制等,因此加重了控制节点的处理负载,对控制节点的硬件配置要求很高,如果控制节点配置达不到运行负载要求,则容易导致控制节点死机、系统瘫痪。
基于上述问题,现在亟需一种新的多节点系统数据处理方法,减轻控制节点的运行负载,加快系统处理速度。
【发明内容】
为了解决现有技术中的上述问题,本发明提出了一种多节点系统数据处理方法。
本发明采用的技术方案如下:
一种多节点系统数据的处理方法,其特征在于,该方法包括如下步骤:
(1)将系统中的各个节点按照性能划分为多个计算节点和一个控制节点;
(2)当控制节点接收到数据处理服务请求时,选择一个计算节点作为数据处理节点,控制节点将其存储的数据处理线程传送给上述数据处理节点;
(3)所述数据处理节点接收上述数据处理线程,保存在本地并运行数据处理线程实现数据处理。
本发明的有益效果包括:选择其一充当数据处理节点,将数据处理工作从控制节点中分离出来,减轻控制节点的运行负载,加快系统处理速度。
【附图说明】
此处所说明的附图是用来提供对本发明的进一步理解,构成本申请的一部分,但并不构成对本发明的不当限定,在附图中:
图1是本发明多节点系统的结构图。
图2是本发明多节点系统中数据的处理方法的流程图。
【具体实施方式】
下面将结合附图以及具体实施例来详细说明本发明,其中的示意性实施例以及说明仅用来解释本发明,但并不作为对本发明的限定。
参见附图1,是本发明所应用的多节点系统,该系统包括一个控制节点和多个计算节点。
参见附图2,一种多节点系统中数据的处理方法,该方法包括如下步骤:
(1)将系统中的节点按照性能划分为多个计算节点和一个控制节点,所述分布式系统中作为计算机资源的计算节点组成机群、提供计算机资源给控制节点,控制节点中存储有调度线程、负载监控线程、数据清洗线程,还可以存储数据挖掘线程,其中控制节点负责系统中的任务调度、各个计算节点的负载监控以及对外提供服务,在一个实施方式中,所述服务包括数据挖掘服务,在其他实施方式中,还可以包括其他对外服务;
(2)控制节点中的负载监控线程对各个计算节点的运行负载进行实时监控;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于航天星图科技(北京)有限公司,未经航天星图科技(北京)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201611111267.3/2.html,转载请声明来源钻瓜专利网。