[发明专利]数据同步系统和数据同步方法

说明书

技术领域

本发明涉及数据同步技术领域，具体而言，涉及一种数据同步系统和一种数据同步方法。

背景技术

在企业的IT环境中，通常需要多个系统的数据集成，某个系统中数据和变化需要及时同步到其他系统，例如，企业销售系统的业务数据，需要接近实时地同步到ERP、BI/DW、CRM和搜索引擎等系统中。

现有的数据同步技术主要分2类。1类是关系数据库系统（RDBMS）提供的数据复制，其数据复制用于数据库系统之间数据复制，适用的应用场景很有限；另1类是定制开发的数据同步软件，其通常使用集中的服务器来管理和维护客户端（目标端）的状态，增加了系统的复杂度，也限制了系统的可伸缩性。

因此，如何提供一种适用于各种场景、简单可靠的数据同步技术，成为目前亟待解决的技术问题。

发明内容

本发明正是基于上述问题，提出了一种新的数据同步技术，可以通过由每个客户端维护自身的数据同步状态，从而不需要服务器端的集中协调和管理，有助于简化系统结构和管理复杂度，提高了系统的可用性和可靠性。

有鉴于此，本发明提出了一种数据同步系统，包括主服务器、连接至所述主服务器的一个或多个数据服务器，且每个所述数据服务器与一个或多个客户端相连，其中，所述主服务器包括：数据获取单元，用于从数据源获取更新数据或事务；数据分发单元，用于将所述更新数据或事务分发至所有连接至所述主服务器的数据服务器；每个所述数据服务器包括：数据存储单元，用于存储所述主服务器分发的所述更新数据或事务；每个所述客户端包括：数据同步单元，用于自行向相连的数据服务器获取所述更新数据或事务，以维护每个所述客户端自身的数据同步状态。

在该技术方案中，通过由客户端自行维护自身的数据同步状态，使得数据服务器仅需要执行更新数据的存储，而主服务器也仅需执行更新数据的获取和向数据服务器的分发操作，无需由数据服务器或主服务器或其他单独的服务器来对客户端的数据同步操作进行管理，有助于简化系统结构和管理结构，也使得整个系统结构更容易实现伸缩，提高了系统的运行可靠性。

在上述技术方案中，优选地，每个所述客户端的所述数据同步单元周期性地、和/或在无法顺利完成预设的操作时，向相连的数据服务器发出数据更新请求，以获取所述数据服务器存储的更新数据或事务。

在该技术方案中，客户端可以默认设置或由用户自定义数据同步周期，比如24小时，则客户端可以自动查询和下载更新数据，及时完成数据同步操作，具体地，可以将数据同步的时刻设置为凌晨等，从而用户在使用客户端时，总是能够顺利使用，无需等待实时的数据更新。或者，基于用户的实际需求，可以仅在客户端依靠已有数据无法完全具体的操作时，才向数据服务器提请数据同步，由于数据更新可能并不经常发生，因而可以显著地降低过多的查询给客户端和数据服务器造成额外的压力。

在上述任一技术方案中，优选地，每个所述客户端的所述数据同步单元根据向相连的数据服务器发出的数据更新请求，从所述相连的数据服务器获取全量数据或增量数据。

在该技术方案中，通过下载全量数据，可以避免补丁数据与原有数据之间可能存在的不兼容等问题；而通过下载增量数据，可以有助于减少数据交互量，提高数据同步效率。

在上述任一技术方案中，优选地，所述主服务器还包括：标识设置单元，用于按照预设顺序，为每次从所述数据源获取的所述更新数据或事务设置对应的数据标识，以供每个所述数据服务器的所述数据存储单元将所述更新数据或事务与所述数据标识进行关联存储；每个所述客户端还包括：结果判断单元，用于根据本次数据同步和上次数据同步时分别获取的数据标识是否按所述预设顺序进行排列，从而判断数据同步是否成功。

在该技术方案中，通过设置数据标识，使得依次生成的更新数据的数据标识之间按照预设顺序进行排列，从而客户端可以据此检查获取的更新数据是否发生了遗漏或重复，避免使用错误的更新数据而导致更新失败。

在上述任一技术方案中，优选地，所述数据同步单元还用于：将相应的客户端在上次数据同步时获取的数据标识发送至相连的数据服务器，以供所述相连的数据服务器确定是否存在新的更新数据或事务。

在该技术方案中，客户端还可以直接将数据标识发送给数据服务器，由数据服务器基于该数据标识，与最新的更新数据进行比较，即可了解客户端是否需要执行数据更新，从而有助于减少数据交互次数，提升交互效率。