[发明专利]搜索服务器刷索引的方法、装置、设备及可读存储介质有效
申请号: | 201811197177.X | 申请日: | 2018-10-15 |
公开(公告)号: | CN109522313B | 公开(公告)日: | 2020-11-24 |
发明(设计)人: | 刘浩;彭齐荣 | 申请(专利权)人: | 深圳云天励飞技术有限公司 |
主分类号: | G06F16/23 | 分类号: | G06F16/23;G06F16/2455 |
代理公司: | 深圳远胜智和知识产权代理事务所(普通合伙) 44665 | 代理人: | 邹蓝 |
地址: | 518000 广东省深圳市龙岗区园山*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 搜索 服务器 索引 方法 装置 设备 可读 存储 介质 | ||
本发明公开了一种搜索服务器刷索引的方法、装置、设备及可读存储介质,其中该方法包括:获取记录有待刷入搜索服务器的索引数据的数据表,以及数据表对应的索引数组;获取索引数组的多个副本数组;通过多个副本数组分别抢占索引数组,并在多个副本数组中的任一副本数组抢占到索引数组时,通过抢占到索引数组的副本数组从索引数组中抢占预设个数的第一字符,直至索引数组中的第一字符全被抢占;在多个副本数组中的任一副本数组从索引数组中抢占到预设个数的第一字符时,通过该副本数组对应的线程将数据表中与该副本数组抢占到的第一字符对应的索引数据刷入搜索服务器,能提升向搜索服务器中刷入索引数据的速度。
技术领域
本发明涉及搜索引擎技术领域,尤其涉及一种搜索服务器刷索引的方法、装置、设备及可读存储介质。
背景技术
搜索是指根据用户提交的搜索词/条件搜集信息,以确定搜索结果,并将搜索结果展示给用户的一种信息处理方式;搜索主要依赖用户设备和搜索服务器之间的数据交互实现,用户设备将用户输入的搜索词/条件提交至搜索服务器,搜索服务器根据搜索词/条件确定搜索结果,并向用户设备展示搜索结果。
目前搜索服务器在根据用户需求进行搜索之前,需要通过专门刷索引数据的工具将索引数据刷到搜索服务器中,而在刷完一些索引数据之后,为了让程序清楚哪些索引数据已经刷入搜索服务器,哪些索引数据还没刷入搜索服务器,一般通过数据库的某个特定字段(如读取标识字段)来标识。这就需要在每次刷完索引数据后修改数据库的这个特定字段,而当多线程并行向搜索服务器中刷入索引数据时,为避免数据库内发生冲突,在任一线程修改数据库的特定字段时,需要锁死数据库,因此在多线程并行向搜索服务器刷入索引数据时,修改数据库中的特定字段会产生一定的耗时,造成向搜索服务器中刷入索引数据的速度慢,影响用户体验。
发明内容
本发明的主要目的在于提供一种搜索服务器刷索引的方法、装置、设备及可读存储介质,以解决向搜索服务器中刷入索引数据的速度慢,影响用户体验的问题。
为实现上述目的,本发明提供了一种搜索服务器刷索引的方法,包括:
获取记录有待刷入搜索服务器的索引数据的数据表,以及数据表对应的索引数组;其中,数据表中还记录有每个索引数据对应的数据标识,索引数组所包含的第一字符的数量与数据标识的数量相同,且索引数组中的第一字符与数据表中的数据标识一一对应;
获取索引数组的多个副本数组;其中,多个副本数组与用于将索引数据刷入搜索服务器的多个线程一一对应;
通过多个副本数组分别抢占索引数组,并在多个副本数组中的任一副本数组抢占到索引数组时,通过抢占到索引数组的副本数组从索引数组中抢占预设个数的第一字符,直至索引数组中的第一字符全被抢占;
在多个副本数组中的任一副本数组从索引数组中抢占到预设个数的第一字符时,通过该副本数组对应的线程将数据表中与该副本数组抢占到的第一字符对应的索引数据刷入搜索服务器。
本发明还提供了一种搜索服务器刷索引的装置,包括:
第一获取模块,用于获取记录有待刷入搜索服务器的索引数据的数据表,以及数据表对应的索引数组;其中,数据表中还记录有每个索引数据对应的数据标识,索引数组所包含的第一字符的数量与数据标识的数量相同,且索引数组中的第一字符与数据表中的数据标识一一对应;
第二获取模块,用于获取索引数组的多个副本数组;其中,多个副本数组与用于将索引数据刷入搜索服务器的多个线程一一对应;
抢占模块,用于通过多个副本数组分别抢占索引数组,并在多个副本数组中的任一副本数组抢占到索引数组时,通过抢占到索引数组的副本数组从索引数组中抢占预设个数的第一字符,直至索引数组中的第一字符全被抢占;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于深圳云天励飞技术有限公司,未经深圳云天励飞技术有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201811197177.X/2.html,转载请声明来源钻瓜专利网。