[发明专利]搜索服务器刷索引的方法、装置、设备及可读存储介质有效
申请号: | 201811197177.X | 申请日: | 2018-10-15 |
公开(公告)号: | CN109522313B | 公开(公告)日: | 2020-11-24 |
发明(设计)人: | 刘浩;彭齐荣 | 申请(专利权)人: | 深圳云天励飞技术有限公司 |
主分类号: | G06F16/23 | 分类号: | G06F16/23;G06F16/2455 |
代理公司: | 深圳远胜智和知识产权代理事务所(普通合伙) 44665 | 代理人: | 邹蓝 |
地址: | 518000 广东省深圳市龙岗区园山*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 搜索 服务器 索引 方法 装置 设备 可读 存储 介质 | ||
1.一种搜索服务器刷索引的方法,其特征在于,包括:
获取记录有待刷入搜索服务器的索引数据的数据表,以及所述数据表对应的索引数组;其中,所述数据表中还记录有每个所述索引数据对应的数据标识,所述索引数组所包含的第一字符的数量与所述数据标识的数量相同,且所述索引数组中的第一字符与所述数据表中的数据标识一一对应;
获取所述索引数组的多个副本数组;其中,所述多个副本数组与用于将所述索引数据刷入所述搜索服务器的多个线程一一对应;
通过所述多个副本数组分别抢占所述索引数组,并在所述多个副本数组中的任一副本数组抢占到所述索引数组时,使用预设的数据库锁锁死所述索引数组,以使抢占到所述索引数组的副本数组获取所述索引数组的游标的值,并从所述索引数组中所述游标的值对应的第一字符开始抢占预设个数的第一字符,直至所述索引数组中的第一字符全被抢占;其中,所述索引数组的游标的值在所述多个副本数组中任一副本数组抢占所述索引数组之前,被修改为所述索引数组中未被抢占的所有第一字符中的第一个第一字符在所述索引数组中的序号值,在抢占到所述索引数组的副本数组从所述索引数组中抢占完所述预设个数的第一字符之后,解除所述数据库锁;
在所述多个副本数组中的任一副本数组从所述索引数组中抢占到所述预设个数的第一字符时,通过该副本数组对应的线程将所述数据表中与该副本数组抢占到的第一字符对应的索引数据刷入所述搜索服务器。
2.根据权利要求1所述的方法,其特征在于,所述数据库锁为同步锁。
3.根据权利要求1所述的方法,其特征在于,所述副本数组所包含的第二字符的数量与所述索引数组所包含的第一字符的数量相同,且所述副本数组中的第二字符与所述索引数组中的第一字符一一对应;
在所述通过该副本数组对应的线程将所述数据表中与该副本数组抢占到的第一字符对应的索引数据刷入所述搜索服务器的步骤之后,所述方法还包括:
分别针对该副本数组从所述索引数组中抢占到的每个第一字符,检测所述数据表中与该第一字符对应的索引数据是否被成功刷入所述搜索服务器,当所述数据表中与该第一字符对应的索引数据被成功刷入所述搜索服务器时,将该副本数组中与该第一字符对应的第二字符修改为用于表征该第一字符对应的索引数据被成功刷入所述搜索服务器中的标识符。
4.根据权利要求3所述的方法,其特征在于,所述第二字符为二进制数0和1中的一个,所述标识符为二进制数0和1中的另一个。
5.根据权利要求4所述的方法,其特征在于,在所述分别针对该副本数组从所述索引数组中抢占到的每个第一字符,检测所述数据表中与该第一字符对应的索引数据是否被成功刷入所述搜索服务器,当所述数据表中与该第一字符对应的索引数据被成功刷入所述搜索服务器时,将该副本数组中与该第一字符对应的第二字符修改为用于表征该第一字符对应的索引数据被成功刷入所述搜索服务器中的标识符的步骤之后,所述方法还包括:
按位对所有副本数组中的二进制数进行与运算,得到用于表征所述数据表中的索引数据的刷入进度的进度数组;
其中,所述进度数组所包含的二进制数的数量与所述索引数组中第一字符的数量相同,所述进度数组中的二进制数与所述索引数组中的第一字符一一对应,且当所述进度数组中的二进制数为1时,表征该二进制数对应的索引数据未被成功刷入所述搜索服务器,当所述进度数组中的二进制数为0时,表征该二进制数对应的索引数据被成功刷入所述搜索服务器。
6.根据权利要求1所述的方法,其特征在于,所述获取所述索引数组的多个副本数组的步骤,包括:
对所述索引数组进行复制操作,得到所述索引数组的多个副本数组。
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于深圳云天励飞技术有限公司,未经深圳云天励飞技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201811197177.X/1.html,转载请声明来源钻瓜专利网。