[发明专利]一种应用于搜索服务的增量同步方法

摘要

本发明公开了一种应用于搜索服务的增量同步方法。该方法能够将应用系统中的海量不同数据源类型、不同中心库下的多表关联的实时变化的复杂业务数据以高效的速度增量同步至搜索引擎，具有很好的应用前景。

主权项

1.一种应用于搜索服务的增量同步方法，其特征在于，包括：获取数据库中各个表的变更数据及其相关信息，其中，该变更数据的相关信息包括：与每条变更数据对应的数据库的名称和该数据库中的表的名称、与每条变更数据对应的变更类型、以及每条变更数据在变更前后的所有字段值和主键值；分别以第一预设存储方式和第二预设存储方式，将数据库中各个表的变更数据以键值对的方式存储到缓存器中；利用哈希函数对与每条变更数据对应的数据库中的表的名称和每条变更数据在变更后的主键值进行处理，得到多组变更数据，其中，每组变更数据包括至少一条变更数据；针对每组变更数据中的每条变更数据，依次执行以下操作：根据与当前变更数据对应的数据库中的表的名称、以及与该表对应的索引配置信息，得到与该表对应的索引配置信息中包括的多个表中除该表之外的其余各表的数据，其中，该其余各表的数据包括：与该表对应的一级表的名称和主键值、以及与该表对应的索引配置信息中包括的多个表中除该表和与该表对应的一级表之外的其余表的名称和主键值；利用哈希函数，对与该表对应的索引配置信息中包括的搜索引擎索引名称、以及与该表对应的索引配置信息中包括的多个表中除该表和与该表对应的一级表之外的其余表的主键值进行处理，得到多组变更数据，其中，每组变更数据包括至少一条变更数据；针对每组变更数据中的每条变更数据，依次执行以下操作：根据与当前变更数据对应的数据库中的表的名称，查询与该表对应的索引配置信息；根据与该表对应的索引配置信息，从缓存器中查询利用与该表对应的索引配置信息中包括的搜索引擎索引名称配置的多个表的数据，并将该多个表的数据转换为JSON格式数据，调用搜索引擎的接口将该JSON格式数据写入到搜索引擎中，从而实现了从数据库到搜索引擎的增量同步。