[发明专利]数据历史归档的方法和装置

权利要求书

1.一种数据历史归档方法，其特征在于，包括如下步骤：

a)由配置文件提供需历史归档的数据的条件参数；

b)查询到符合条件参数的业务主表数据并放入基于调度任务的任务队列；

c)对任务队列中的每一条业务主表数据按如下措施进行处理，其中，所述措施具有如下步骤：i)通过业务主表主键查询业务子表数据并且每一个业务子表封装一个集合；ii)经由数据源切换机制并通过spring控制事务来将所述业务子表数据及其对应的业务主表数据插入历史数据库，如果所述插入不成功，则将业务主表主键、记录类型为数据插入历史库失败记录到失败表中并回滚所述措施；iii)经由数据源切换机制并通过spring控制事务来删除业务子表生产库的数据以及业务主表生产库的数据，如果所述删除不成功，则将业务主表主键、记录类型为删除生产库数据失败记录到失败表中并回滚所述措施；

d)处理失败表，其中，将所述失败表中对应的业务主表数据放入到基于调度任务的任务队列并依次对其中每一条业务主表数据进行处理，直至失败表中对应于业务主表数据的记录为空；

其中，调度任务是指自动调度、依次处理任务队列中所有业务主表数据的过程。

2.根据权利要求1所述的方法，其特征在于，所述数据源切换机制包括如下步骤：

配置生产库数据源和历史库数据源；

继承spring框架中的数据源抽象类、自定义数据源切换类并重写数据源选择数据库逻辑；

自定义拦截器工具类以便加注解标识。

3.根据权利要求2所述的方法，其特征在于，所述数据源切换机制用于数据插入历史库时，所述注解标识为history。

4.根据权利要求2所述的方法，其特征在于，所述数据源切换机制用于删除生产库数据时，所述注解标识为write。

5.根据权利要求1所述的方法，其特征在于，当在处理失败表的情况下对放入到基于调度任务的任务队列中的每一条业务主表数据进行处理时，如果记录类型为数据插入历史库失败，则依次执行所述措施的步骤i)至iii)，在成功执行步骤i)至iii)之后删除失败表中对应于业务主表数据的记录；而如果记录类型为删除生产库数据失败，则仅执行所述措施的步骤iii)，在成功执行步骤iii)之后删除失败表中对应于业务主表数据的记录。

6.一种用于数据历史归档的装置，其特征在于，所述装置包括：配置文件模块、查询业务主表数据模块、遍历执行任务队列模块以及失败表处理模块，其中，

所述配置文件模块用于提供需历史归档的数据的条件参数；

所述查询业务主表数据模块用于查询到符合条件参数的业务主表数据并放入基于调度任务的任务队列；

所述遍历执行任务队列模块用于对任务队列中的每一条业务主表数据按如下措施进行处理，其中，所述措施具有如下步骤：i)通过业务主表主键查询业务子表数据并且每一个业务子表封装一个集合；ii)经由数据源切换机制并通过spring控制事务来将所述业务子表数据及其对应的业务主表数据插入历史数据库，如果所述插入不成功，则将业务主表主键、记录类型为数据插入历史库失败记录到失败表中并回滚所述措施；iii)经由数据源切换机制并通过spring控制事务来删除业务子表生产库的数据以及业务主表生产库的数据，如果所述删除不成功，则将业务主表主键、记录类型为删除生产库数据失败记录到失败表中并回滚所述措施；

所述失败表处理模块用于：将所述失败表中对应的业务主表数据放入到基于调度任务的任务队列并依次对其中每一条业务主表数据进行处理，直至失败表中对应于业务主表数据的记录为空；

其中，调度任务是指自动调度、依次处理任务队列中所有业务主表数据的过程。

7.根据权利要求6所述的装置，其特征在于，所述数据源切换机制包括如下步骤：

配置生产库数据源和历史库数据源；

继承spring框架中的数据源抽象类、自定义数据源切换类并重写数据源选择数据库逻辑；

自定义拦截器工具类以便加注解标识。