[发明专利]数据索引方法及装置

摘要

本申请实施例提供一种数据索引方法及装置，根据指定索引文件的分片规则确定各待插入数据分别所属的目标主分片，将目标主分片从所在的目标节点备份到本地，并通过与ElasticSearch服务进程相互独立的数据插入进程，将属于该目标主分片的待插入数据插入备份的目标主分片中，得到目标新分片，将该目标节点中的该目标主分片替换成目标新分片。如此，可以确保数据插入过程与集群中的ElasticSearch服务进程相互独立，且能够提高数据插入效率。

主权项

1.一种数据索引方法，其特征在于，所述方法包括：获取需要插入指定索引文件的多条待插入数据记录；根据从ElasticSearch集群中获取的所述指定索引文件的元数据信息，确定所述指定索引文件的分片规则，根据所述分片规则从所述指定索引文件包括的多个主分片中确定每条待插入数据记录所属的目标主分片；针对确定的每个目标主分片，通过与所述ElasticSearch集群中的ElasticSearch服务进程相互独立的数据插入进程，从所述ElasticSearch集群中存储有所述目标主分片的目标节点将所述目标主分片备份到本地，将属于所述目标主分片的每条待插入数据记录插入备份的目标主分片中，得到目标新分片，并将所述目标节点上的所述目标主分片替换成所述目标新分片。