[发明专利]分配节点的方法和装置有效
申请号: | 201810870692.3 | 申请日: | 2018-08-02 |
公开(公告)号: | CN109033398B | 公开(公告)日: | 2021-03-30 |
发明(设计)人: | 钟旺 | 申请(专利权)人: | 广州酷狗计算机科技有限公司 |
主分类号: | G06F16/22 | 分类号: | G06F16/22;G06F16/27;G06F15/16;H04L29/08 |
代理公司: | 北京三高永信知识产权代理有限责任公司 11138 | 代理人: | 郭晶 |
地址: | 510660 广东省广州*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 分配 节点 方法 装置 | ||
本申请提供了一种分配节点的方法和装置,属于计算机技术领域。所述方法包括:在为新索引的主分片分配节点时,可以获取ES集群中处于打开状态且存在别名的索引组成的第一索引集合,然后对第一索引集合进行过滤,得到第二索引集合,然后可以确定所述第二索引集合中各索引的主分片所在节点的节点名称,并确定所述ES集群中的主节点的节点名称,将各索引的主分片所在节点的节点名称和主节点的节点名称,通知给主节点,主节点后续在为索引的主分片分配节点时,优先选择ES集群中除第二索引集合中各索引的主分片所在的节点和主节点之外的节点。采用本申请,可以提高ES集群的稳定性。
技术领域
本发明涉及计算机技术领域,特别涉及一种分配节点的方法和装置。
背景技术
ElasticSearch(搜索引擎,ES)集群是一个基于Lucene构建的开源、分布式、Restful搜索引擎,一般用于云计算中,能够达到实时搜索、稳定、可靠、快速和安装使用方便。
相关技术中,ElasticSearch集群中包括多个节点,多个节点中存在一个主节点,主节点负责分配分片,分片包括主分片和副本分片,副本分片由主分片复制得到。在新建一个索引时,一般是为索引分配预设数目个主分片,按照负载均衡的原则,将这预设数目个分片分配到ES集群中的节点上。
这样,由于在主分片被分配到主节点时,主节点在优化索引时会导致主节点磁盘读写增加、负载增多,使得主节点在进行索引优化时,会花费很长时间,进而导致与其它节点通信超时,造成其它节点误以为主节点故障,重新选举主节点,使ES集群的稳定性降低。
发明内容
为了解决现有技术的问题,本发明实施例提供了一种分配节点的方法和装置。所述技术方案如下:
第一方面,提供了一种分配节点的方法,所述方法包括:
获取搜索引擎ES集群中处于打开状态且存在别名的索引组成的第一索引集合;
根据预设的索引前缀,对所述第一索引集合进行过滤,得到第二索引集合,其中,所述预设的索引前缀用于指示索引对应的数据量大于预设数值;
确定所述第二索引集合中各索引的主分片所在节点的节点名称,并确定所述ES集群中的主节点的节点名称;
将所述各索引的主分片所在节点的节点名称和所述主节点的节点名称发送至所述主节点,以使所述主节点在为目标索引的主分片分配节点时,优先选择所述ES集群中除所述各索引的主分片所在的节点和所述主节点之外的节点。
可选的,所述确定所述第二索引集合中各索引的主分片所在节点的节点名称,包括:
对于所述第二索引集合中每个索引的主分片,根据预先存储的主分片的标识与节点标识的对应关系,确定所述索引的主分片的标识对应的目标节点标识,根据预先存储的节点标识和节点名称的对应关系,确定所述目标节点标识所对应的节点名称,为所述索引的主分片所在节点的节点名称。
可选的,所述获取ES集群中处于打开状态且存在别名的索引组成的第一索引集合,包括:
获取ES集群中的全部索引;
确定所述全部索引中处于打开状态的索引;
根据所述处于打开状态的索引的索引名称,确定所述处于打开状态的索引中存在别名的索引;
将所述处于打开状态的索引中存在别名的索引组成第一索引集合。
可选的,所述方法还包括:
控制所述ES集群中的全部节点重新启动。
可选的,所述方法还包括:
在所述ES集群对应的配置文件中,获取所述预设的索引前缀。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于广州酷狗计算机科技有限公司,未经广州酷狗计算机科技有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201810870692.3/2.html,转载请声明来源钻瓜专利网。
- 上一篇:基于车联网的数据推送方法及车联网系统
- 下一篇:一种检测链接有效性的方法