[发明专利]一种基于消息队列的数据同步方法和系统

说明书

本方案提供了一种基于消息队列的数据同步方法和系统，其中，该系统包括：第一数据库将获取得到的数据，基于开源消息队列系统RabbitMQ，写入消息队列；第二数据库基于开源消息队列系统RabbitMQ，从消息队列中获取的数据，以使第一数据库和第二数据库完成数据同步。本申请所述技术方案以消息队列为载体，通过对关键数据的同步，使的数据同步的可控行加强。同时消息队列可以更好的保证数据的完整性，数据丢失或者数据同步失败的情况大大减少。作为应用程序中的关键功能，可移植性较强。

技术领域

本申请涉及数据同步领域，特别涉及一种基于消息队列的数据同步方法和系统。

背景技术

触发器是与表有关的数据库对象，在满足定义条件时触发，并执行触发器中定义的语句集合；同时它一种特殊类型的存储过程，当数据库有特殊的操作时，这些操作由数据库中的事件来触发，自动完成这些SQL语句，而不是程序调用或手工启动。它们主要用于强制服从复杂的业务规则或要求。例如，可以根据客户当前的帐户状态，控制是否允许插入新订单；同时也可用于强制引用完整性，以便在多个表中添加、更新或删除行时，保留在这些表之间所定义的关系。

消息队列是在消息的传输过程中保存消息的容器。队列的主要目的是提供路由并保证消息的传递，如果发送消息时接收者不可用，消息队列会保留消息，直到可以成功地传递它。消息发送者无需知道消息接收者是谁，使得系统设计更清晰。消息队列的好处有很多，第一提高系统响应速度，使用消息队列，生产者一方，把消息往消息队列里一扔，就可以立马返回响应用户，无需等待处理结果；第二保证消息的传递，如果发送消息时接收者不可用，消息队列会保留消息，直到成功的传递它；第三解耦，只要信息格式不变，即使接收者的接口、位置、或者配置改变，也不会给发送者带来任何改变。

发明内容

本申请提供了一种基于消息队列的数据同步方法和系统。

根据本申请实施例的第一个方面，提供了一种基于消息队列的数据同步方法，该系统包括：

第一数据库将获取得到的数据，基于开源消息队列系统RabbitMQ，写入消息队列；

第二数据库基于开源消息队列系统RabbitMQ，从消息队列中获取的数据，以使第一数据库和第二数据库完成数据同步。

在一种优选地实施例中，所述第一数据库将获取得到的数据，基于开源消息队列系统RabbitMQ，写入消息队列的步骤包括：

第一服务单元从基础数据提供方获取相关数据存储在第一数据库的表中，并将第一数据库的表中的状态字段status置为0；

第一数据库获取数据完成后，通过开源消息队列系统RabbitMQ将数据写入消息队列，并将第一数据库的表中的status置为1。

在一种优选地实施例中，所述第一数据库将获取得到的数据，基于开源消息队列系统RabbitMQ，写入消息队列的步骤还包括：

若数据写入消息队列失败，则在RabbitMQ的判断发送失败的回调函数中，再次将第一数据库表的中的status字段置为1。

在一种优选地实施例中，所述第二数据库基于开源消息队列系统RabbitMQ，从消息队列中获取的数据，以使第一数据库和第二数据库完成数据同步的步骤包括：

第二服务单元通过RabbitMQ进行消费，在消费成功的情况下，将数据写入到第二数据库的表中，以使第一数据库和第二数据库完成数据同步；

若消费失败，则在消费失败的回调函数中，将第二服务认为作为生产者，重新将数据通过RabbitMQ发送给第一服务单元，第一服务单元作为消费者，将消费成功的数据通过唯一字段ID更新在第一数据库的表中，并将第一数据库的表的status置为0。

在一种优选地实施例中，该方法的步骤还包括：