[发明专利]一种基于批量数据导入流水线的异步任务补偿方法及装置

摘要

本申请提供一种基于批量数据导入流水线的异步任务补偿方法及装置，属于数据库管理领域，该方法包括：根据数据库操作序列创建多个任务的消息队列；根据所述消息队列中所述任务的顺序将所述任务分配到不同的任务控制监听器，依次进行每个任务的导入并记录每个所述任务导入执行情况；根据所述执行情况判断，若所述任务导入失败，则重新执行所述任务的导入，若导入成功则进行下一个任务的导入，直到完成全部任务导入。本申请通过设置消息队列，任务控制和执行情况监控，可以对导入的数据的完整性进行链路跟踪，任务失败时不会丢失数据而影响其它数据正常执行，从而避免重新开始整个数据库事务的导入，提高导入效率。