[发明专利]基于数据库的数据系统及处理方法

说明书

本发明提供了一种基于数据库的数据系统及处理方法，所述系统包含数据访问代理组件、消息队列组件、数据同步组件和N个数据节点；所述数据访问代理组件用于根据接收到的交易请求进行路由分析，获得执行所述交易请求的数据节点，将所述交易请求对应的查询语句写入所述数据节点；以及，通过切面拦截所述数据节点已处理的所述查询语句，将所述查询语句推送至所述消息队列组件；所述消息队列组件用于接收所述数据访问代理组件提供的所述查询语句并存储；所述数据同步组件用于通过所述消息队列组件获得所述查询语句，于预设的其他数据节点执行所述查询语句并完成数据同步；各所述数据节点的环境配置和数据基础一致，N为大于1的整数。

技术领域

本发明涉及大数据领域，可用于金融领域或其他领域，尤指一种基于数据库的数据系统及处理方法。

背景技术

RTO(Recovery Time Object)是指灾难发生后，从信息系统宕机导致业务停顿之刻开始，到信息系统恢复至可以支持各部门运作，业务恢复运营之时，此两点之间的时间段成为RTO。在目前互联网信息系统的高可用架构设计中，因数据存储层数据库产品的固有机制，其RTO一般在30分钟左右(一个数据库物理主节点故障后，其数据库备用节点还需要30分钟方可对外提供服务)，无法满足信息系统下重要交易RTO小于10分钟的要求。因此信息系统在数据库系统产品高可用基础上(整体RTO可以保证在30分钟)，还需要在应用处理层针对重点交易进行代码级的定制化双写操作(将数据写入另一个数据库主节点，非现有数据库的备用节点)以保证一个数据库主节点发生故障时可以在10分钟内切换到另一个数据库主节点提供服务。

但上述解决方案需要依赖应用处理层针对交易进行代码级的定制化操作，一来应用双写造成服务时长增加，同时一旦交易范围有变化，则每次都需要开发人员手动修改一遍并进行测试，存在开发测试工作量持续投入的问题，因此急需一种系统级的方法及方案解决上述问题。

发明内容

本发明目的在于提供一种基于数据库的数据系统及处理方法解决了现有互联网信息系统通过代码级的应用双写策略存在不灵活、开发测试成本持续投入的问题。

为达上述目的，本发明所提供的一种基于数据库的数据系统，所述系统包含数据访问代理组件、消息队列组件、数据同步组件和N个数据节点；所述数据访问代理组件用于根据接收到的交易请求进行路由分析，获得执行所述交易请求的数据节点，将所述交易请求对应的查询语句写入所述数据节点；以及，通过切面拦截所述数据节点已处理的所述查询语句，将所述查询语句推送至所述消息队列组件；所述消息队列组件用于接收所述数据访问代理组件提供的所述查询语句并存储；所述数据同步组件用于通过所述消息队列组件获得所述查询语句，于预设的其他数据节点执行所述查询语句并完成数据同步；各所述数据节点的环境配置和数据基础一致，N为大于1的整数。

在上述基于数据库的数据系统中，优选的，所述数据访问代理组件还包含决策模块；所述决策模块用于分析所述交易请求在所述数据节点的执行情况获得执行策略；所述执行策略包含：当所述数据节点已处理完所述查询语句，通过切面拦截所述查询语句，将所述查询语句推送至所述消息队列组件；当所述数据节点未能处理完所述查询语句，将所述交易请求退回至交易发起方并反馈提示信息。

在上述基于数据库的数据系统中，优选的，所述决策模块包含：通过分布式事务同步机制分析所述交易请求在所述数据节点的执行情况获得执行策略。

在上述基于数据库的数据系统中，优选的，所述数据访问代理组件包含登记模块，所述登记模块用于将所述交易请求对应的查询语句写入所述数据节点的节点流水表，并于所述节点流水表中记录所述数据节点为待登记状态；以及，当所述数据节点通过所述查询语句获取所述交易请求后，将所述节点流水表中所述数据节点改为已登记状态。

在上述基于数据库的数据系统中，优选的，所述数据同步组件还包含流水表更新模块，所述流水表更新模块用于在其他数据节点完成数据同步后，将所述节点流水表中其他数据节点设为已登记状态。