[发明专利]基于消息中间件的数据迁移方法及相关设备

摘要

本发明涉及数据处理技术领域，尤其涉及一种基于消息中间件的数据迁移方法及相关设备，所述方法包括：从源数据库抽取待迁移数据后写入消息中间件集群的第一级消息中间件；将待迁移数据进行流式计算处理后传输至次级消息中间件；根据次级消息中间件的下一级连接判断是否存在数据异步落地要求；当存在时将待迁移数据传输至与次级消息中间件连接的中间数据库，再通过ETL方式使数据落库至目标数据库；当不存在时将待迁移数据进行流式计算处理后传输至后续级联的消息中间件后，使待迁移数据落库至目标数据库。本发明通过构建中间件作为数据迁移的中间桥梁，实现数据从源数据库落库至目标数据库，具有实时性高、低延时、传输率高的优点。

主权项

1.一种基于消息中间件的数据迁移方法，其特征在于，包括：从源数据库抽取待迁移数据后写入消息中间件集群的第一级消息中间件，所述消息中间件集群包括级联的至少两个消息中间件；将所述第一级消息中间件中的所述待迁移数据进行流式计算处理后传输至次级消息中间件；根据所述次级消息中间件连接的下一级中间存储单元的类型，判断所述次级消息中间件是否存在数据异步落地要求，当存在数据异步落地要求时，通过与所述次级消息中间件连接的中间数据库将所述待迁移数据落库至目标数据库，当不存在数据异步落地要求时，通过与所述次级消息中间件连接的后续级联的消息中间件将所述待迁移数据落库至所述目标数据库，所述中间存储单元的类型包括消息中间件和中间数据库。