[发明专利]消息中间件的数据同步系统及方法

说明书

本发明提供一种消息中间件的数据同步系统，数据同步系统用于第一用户系统和第二用户系统之间的数据交互，所述第一用户系统和所述第二用户系统是同一操作的两个不同系统，所述第一用户系统和所述第二用户系统分别有独立的第一数据库和第二数据库用于保存数据，所述数据同步系统包括消息模块、数据处理模块和同步模块，本发明对任务数据同步方没有依赖，避免因数据同步方造成的数据缺失；本发明在数据同步失败时，会持续同步直至同步成功；本发明根据最后更新时间进行裁决，从而把最新的数据同步到对方，保证数据的完整性。

技术领域

本发明涉及数据同步技术，尤其涉及一种消息中间件的同步系统及方法。

背景技术

随着信息时代的飞速发展，大数据、人工智能的兴起，数据作为一种资源，越来越被一些企业、单位重视，数据产出的经济和社会价值也越来越明显。一个软件或系统在不同的客户端修改，修改后的数据由于所涉及的服务器不同或数据库宕机造成数据无法同步，影响数据的最终准确性，因此，如何保证消息中间件的数据同步，提高数据的完整性，是本领域技术人员需要解决的技术问题；例如，中国专利文献CN111026774A公开了一种数据顺序同步方法、装置、计算机设备及存储介质，通过获取数据库的变更记录表，对唯一字段的hash值对所述消息中间件的分区数进行取模运算，判断唯一字段的值不存在，获取所述变更记录表的表名的hash值；本发明为了解决数据同步不及时造成中间数据的缺失提供一种消息中间件的数据同步系统及方法。

发明内容

本发明的目的是提供一种消息中间件的数据同步系统及方法，基于消息队列，仲裁数据库及时将更新或丢失数据同步到数据缺失方，实现数据的完整性。

为了实现上述目的，本发明提供以下技术方案：

本发明提供一种消息中间件的数据同步系统，数据同步系统用于第一用户系统和第二用户系统之间的数据交互，所述第一用户系统和所述第二用户系统是同一操作的两个不同系统，所述第一用户系统和所述第二用户系统分别有独立的第一数据库和第二数据库用于保存数据和更新数据，所述数据同步系统包括消息模块、数据处理模块和同步模块，所述消息模块中含有数据更新仲裁服务，所述数据更新仲裁服务集成了消息中间件RocketMQ，第一用户系统和/或第二用户系统更新的数据更新成功则投递给所述数据更新仲裁服务，数据更新失败则不投递数据，流程结束；所述数据更新仲裁服务将更新的数据发送到所述数据处理模块，消息中间件RocketMQ监听消费消息即更新的数据，所述数据更新仲裁服务根据消息中间件消费消息时获取的更新数据进行第一用户系统和第二用户系统的数据库数据比对，根据数据库数据比对的结果投递给同步模块，所述同步模块将更新的数据同步到第一用户系统和/或第二用户系统，所述同步模块同步不成功则反馈给所述数据处理模块再次处理，直至更新数据同步成功。

进一步地，所述第一用户系统包括用第一户信息模块、第一投资偏好信息模块和第一项目信息模块；

所述第二用户系统包括第二用户信息模块、第二投资偏好信息模块和第二项目信息模块。

进一步地，所述第一用户系统和第二用户系统包含的每个模块分别与数据同步系统进行数据交互。

进一步地，所述消息模块用于数据更新仲裁服务，准确的、优雅的同步数据。

进一步地，所述数据处理模块用于处理所述第一用户系统和/或第二用户系统数据库数据获取和所述第一用户系统和/或第二用户系统数据库数据的比对。

进一步地，所述数据库数据获取是由消息中间件RocketMQ监听消费消息根据所述第一用户系统或第二用户系统数据更新的数据库数据从另一用户系统的数据库查询信息。

进一步地，所述数据库数据的比对包括所述第一用户系统和/或第二用户系统数据库数据更新的时间比对和所述第一用户系统和/或第二用户系统数据库数据多少的比对。