[发明专利]数据同步方法、装置、设备及存储介质在审
申请号: | 202011284212.9 | 申请日: | 2020-11-17 |
公开(公告)号: | CN112328695A | 公开(公告)日: | 2021-02-05 |
发明(设计)人: | 祝昊阳 | 申请(专利权)人: | 中国平安财产保险股份有限公司 |
主分类号: | G06F16/27 | 分类号: | G06F16/27;G06F16/22;G06F16/23 |
代理公司: | 深圳国新南方知识产权代理有限公司 44374 | 代理人: | 张曾明 |
地址: | 518000 广东省深圳市福田区益田路*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 数据 同步 方法 装置 设备 存储 介质 | ||
本发明提出一种数据同步方法、装置、设备及存储介质,所述数据同步方法包括:获取所述搜索引擎的至少一个检索索引,每个所述检索索引指向至少一种数据类型的检索数据,所述搜索引擎依据所述检索索引在对应数据类型的所述检索数据中进行检索;从外部数据平台获取所述检索索引对应的所述数据类型的待同步的检索数据;创建同步索引,将所述同步索引指向所述待同步的检索数据;将所述检索索引指向所述同步索引;接收检索关键词,依据所述检索关键词获取对应的所述检索索引,在所述检索索引指向的所述同步索引对应的所述检索数据中进行检索。通过上述方法,本发明能够达到提高数据同步的及时性、稳定性、可靠性及完整性的目的。
技术领域
本发明涉及数据处理\数据同步技术领域,尤其涉及一种数据同步方法、装置、设备及存储介质。
背景技术
在信息化的时代,搜索引擎在各行各业发挥着极其重要的作用,搜索数据的同步是决定搜索是否准确的重要步骤,当前搜索引擎普遍采用的同步方法是,同步数据前会先将检索索引及检索索引下的数据全部删除,然后再开始全量同步,全量同步数据时,先获取需要同步的数据,然后创建一个自定义的索引,然后将数据插入到该索引下,后续进行检索时,都会以这个索引来检索数据。
采用如上方法进行数据同步,在存在异常导致同步失败的时候,会因为旧数据已被删除,新数据又同步失败,导致使用新建的索引检索数据时,存在查询出错、查询不到数据、查询到的数据不完整等问题。
发明内容
本发明提供一种数据同步方法、装置、设备及存储介质,能够达到提高数据同步的及时性、稳定性、可靠性及完整性的目的。
为解决上述技术问题,本发明采用的一个技术方案是:提供一种数据同步方法,所述数据同步方法包括:
获取所述搜索引擎的至少一个检索索引,每个所述检索索引指向至少一种数据类型的检索数据,所述搜索引擎依据所述检索索引在对应数据类型的所述检索数据中进行检索;
从外部数据平台获取所述检索索引对应的所述数据类型的待同步的检索数据;
创建同步索引,将所述同步索引指向所述待同步的检索数据;
将所述检索索引指向所述同步索引;
接收检索关键词,依据所述检索关键词获取对应的所述检索索引,在所述检索索引指向的所述同步索引对应的所述检索数据中进行检索。
根据本发明的一种实施例,所述从外部数据平台获取所述检索索引对应的所述数据类型的待同步的检索数据,包括:
创建至少一个第一调度任务,所述第一调度任务为按预设时间被调度器调度执行的任务;
按所述预设时间调度所述第一调度任务从所述外部数据平台获取所述待同步的检索数据。
根据本发明的一种实施例,所述创建同步索引,将所述同步索引指向所述待同步的检索数据,包括:
调度所述第一调度任务创建所述同步索引,并为所述同步索引命名获得所述同步索引名称,不同所述同步索引对应不同所述同步索引名称;
依据所述同步索引名称调度所述第一调度任务将所述同步索引指向所述待同步的检索数据。
根据本发明的一种实施例,所述检索索引包括检索索引名称,不同所述检索索引对应不同所述检索索引名称,所述将所述检索索引指向所述同步索引,包括:
依据所述检索索引名称、所述同步索引名称将所述检索索引指向所述同步索引。
根据本发明的一种实施例,所述将所述检索索引指向所述同步索引,包括:
创建第二调度任务;
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于中国平安财产保险股份有限公司,未经中国平安财产保险股份有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/202011284212.9/2.html,转载请声明来源钻瓜专利网。
- 数据显示系统、数据中继设备、数据中继方法、数据系统、接收设备和数据读取方法
- 数据记录方法、数据记录装置、数据记录媒体、数据重播方法和数据重播装置
- 数据发送方法、数据发送系统、数据发送装置以及数据结构
- 数据显示系统、数据中继设备、数据中继方法及数据系统
- 数据嵌入装置、数据嵌入方法、数据提取装置及数据提取方法
- 数据管理装置、数据编辑装置、数据阅览装置、数据管理方法、数据编辑方法以及数据阅览方法
- 数据发送和数据接收设备、数据发送和数据接收方法
- 数据发送装置、数据接收装置、数据收发系统、数据发送方法、数据接收方法和数据收发方法
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置
- 数据发送方法、数据再现方法、数据发送装置及数据再现装置